llms.txt 是什么:一句话结论
llms.txt 是放在站点根目录的一份 Markdown 索引,用自然语言告诉大模型「这个站有什么、哪些页面最重要」。它由 Answer.AI 的 Jeremy Howard 在 2024 年 9 月提出,至今仍是社区提案,不是 W3C 标准,也没有被任何主流搜索引擎采纳为排名信号。
结论:llms.txt 是一个低成本的整理动作,不是排名手段。做它的理由是可被 AI 工具正确理解,而不是指望搜索流量上涨。
llms.txt 想解决什么问题
传统爬虫靠链接发现页面,再把整站抓一遍。大模型做检索增强时也走类似路径,但上下文窗口有限,站点结构越乱,越容易抓到导航栏、标签页、分页这类低价值页面。llms.txt 的思路反过来:由站点主动交出一份目录加摘要,模型不必猜。
和 robots.txt、sitemap.xml 的分工
| 文件 | 回答的问题 | 谁在读 |
|---|---|---|
| robots.txt | 哪些内容可以抓 | 几乎所有爬虫 |
| sitemap.xml | 站点有哪些 URL | 主流搜索引擎 |
| llms.txt | 哪些内容值得优先读 | 少数 AI 工具与编码代理 |
结论:robots.txt 是门禁,sitemap.xml 是清单,llms.txt 是导读。先有前两个,第三个才有意义。
2026 年有哪些引擎真的支持
这部分最需要说清楚,因为市面上大量「做了 llms.txt 就能被 AI 推荐」的说法缺乏证据。
- Google 明确表示不使用,搜索中心的 AI 功能说明把它归入不需要创建的文件,并说明有或没有都不影响在 Google 上的展现。
- OpenAI、Anthropic、Perplexity 面向站长的文档只讲如何用 robots.txt 控制爬虫,没有把它列为答案选择的信号。它们给自己的文档站发布这个文件,只说明自己这样呈现内容,不等于会读你的。
- 第三方抽样:Ahrefs 对约 13.7 万个域名的分析显示,2026 年 5 月有 97% 的 llms.txt 文件没有收到任何请求;在确实到达的请求里,AI 检索机器人只占约 1%。
目前真正的读者主要是编码代理和部分开发工具。当用户把某个域名指给 Cursor、Claude Code 这类工具时,它们会读这个文件。对做技术文档的站点,这是一群规模不大但意图明确的读者。
结论:把它当成给 AI 工具看的说明书,而不是给搜索引擎看的排名文件,预期就对了。
外贸站要不要做
结论:可以做,但排在内容和结构之后,不要为它单独排期。
判断标准很直接。如果站点已有清晰栏目、可抓取正文、能回答具体问题的页面,那么加一份文件是半小时的事,顺手做了没有坏处。如果页面零散、正文靠图片、参数放在 PDF 里,文件写得再漂亮也没用,模型打开链接看到的还是空页面。
值得做的情况
- 有稳定栏目结构,核心页在 20 个以上
- 面向海外客户,需要被英文 AI 工具正确识别业务范围
- 有接口文档或技术资料
可以跳过的情况
- 站点不足 10 个页面,整站抓一遍成本很低
- 内容还在大改,索引会频繁变动
- 目的是提升 Google 排名
怎么写一份能用的 llms.txt
结论:H1 写站点名,一句话说清业务,再按栏目分节列链接,全文控制在 10KB 以内。
格式上没有强制规范,社区约定大致四层:第一行写站点名称;紧跟一句摘要说明这是什么站、服务谁;然后用二级标题分节,每节列 3 到 10 条链接并附一句说明;最后可留一节标记可选内容。
几个容易写错的地方:
- 把所有 URL 都塞进去。它是精选索引,不是第二个 sitemap,通常 20 到 50 条足够。
- 只写链接不写说明。链接后面跟一句「这条讲什么」,模型才知道优先级。
- 写与实际不符的承诺。文件说提供免费诊断,页面却没有入口,这种不一致比不写更糟。
本站已经部署了一份,可以直接打开 微功夫 llms.txt 看实际写法,提案原文见 llmstxt.org。
结论:文件内容必须和站点实际页面一致。它降低的是理解成本,不是掩盖内容缺口。
怎么验证有没有生效
结论:看服务器访问日志,不要在后台面板里找 AI 收录指标,那个指标不存在。
做法是在 nginx 或 Apache 的访问日志里筛 AI 爬虫的 UA,观察这个路径的请求来源与频次。一个月内零请求说明目标读者没来,这份文件目前只是备着。这跟做外贸 GEO 的判断一致:AI 引用依赖可抓取、可摘录、可验证三件事,它只作用在第一环的边缘。基础概念见GEO 是什么。
llms.txt 和外贸 GEO 是什么关系
结论:llms.txt 是 GEO 的辅助项,不是主线。
真正决定 AI 是否引用你的,是页面有没有把问题回答完整、事实是否带单位和时间、实体信息是否前后一致。这些属于内容与结构层面,具体拆解在外贸 GEO 优化和外贸 GEO 指南里。它能做的,是让愿意读它的工具少走弯路,不改变内容质量本身。
下一步该按什么顺序做
如果决定做,顺序是:先确认 robots.txt 没有误拦、sitemap 能正常访问,再写这份文件,最后在日志里观察请求,三步大约半天。需要判断现有站点的 GEO 基础,可以从GEO 技术优化这份检查项开始。
常见问题
llms.txt 是官方标准吗?
不是。它是 2024 年 9 月提出的社区提案,没有被 W3C 或任何搜索引擎采纳为规范。Google 明确表示不使用,其他厂商面向站长的文档只讲 robots.txt,没有把它列为信号。
做了 llms.txt 会被 ChatGPT 推荐吗?
不能保证。目前没有主流 AI 厂商确认把它作为答案选择的依据,实际读取的多是编码代理类工具。它降低的是理解成本,不直接产生引用。
llms.txt 和 sitemap.xml 要写一样的内容吗?
不一样。sitemap 求全,列出全部可索引地址;llms.txt 求精,通常 20 到 50 条,按重要性排序并附一句说明。
外贸站没有开发者文档,还值得做吗?
值得顺手做,但优先级低于页面内容和抓取基础。如果站点不足 10 个页面,整站被抓一遍成本很低,可以跳过。
怎么知道有没有 AI 读过这个文件?
看服务器访问日志里该路径的请求 UA,按来源与频次统计。一个月内零请求说明还没人读,属于当前常态。
来源与说明
- llms.txt 提案原文 · Answer.AI · 访问:2026-11-16
- 微功夫官网 llms.txt · 微功夫 · 访问:2026-11-16