llms.txt 是什么:一句话结论

llms.txt 是放在站点根目录的一份 Markdown 索引,用自然语言告诉大模型「这个站有什么、哪些页面最重要」。它由 Answer.AI 的 Jeremy Howard 在 2024 年 9 月提出,至今仍是社区提案,不是 W3C 标准,也没有被任何主流搜索引擎采纳为排名信号。

结论:llms.txt 是一个低成本的整理动作,不是排名手段。做它的理由是可被 AI 工具正确理解,而不是指望搜索流量上涨。

llms.txt 想解决什么问题

传统爬虫靠链接发现页面,再把整站抓一遍。大模型做检索增强时也走类似路径,但上下文窗口有限,站点结构越乱,越容易抓到导航栏、标签页、分页这类低价值页面。llms.txt 的思路反过来:由站点主动交出一份目录加摘要,模型不必猜。

和 robots.txt、sitemap.xml 的分工

文件回答的问题谁在读
robots.txt哪些内容可以抓几乎所有爬虫
sitemap.xml站点有哪些 URL主流搜索引擎
llms.txt哪些内容值得优先读少数 AI 工具与编码代理
结论:robots.txt 是门禁,sitemap.xml 是清单,llms.txt 是导读。先有前两个,第三个才有意义。

2026 年有哪些引擎真的支持

这部分最需要说清楚,因为市面上大量「做了 llms.txt 就能被 AI 推荐」的说法缺乏证据。

  • Google 明确表示不使用,搜索中心的 AI 功能说明把它归入不需要创建的文件,并说明有或没有都不影响在 Google 上的展现。
  • OpenAI、Anthropic、Perplexity 面向站长的文档只讲如何用 robots.txt 控制爬虫,没有把它列为答案选择的信号。它们给自己的文档站发布这个文件,只说明自己这样呈现内容,不等于会读你的。
  • 第三方抽样:Ahrefs 对约 13.7 万个域名的分析显示,2026 年 5 月有 97% 的 llms.txt 文件没有收到任何请求;在确实到达的请求里,AI 检索机器人只占约 1%。

目前真正的读者主要是编码代理和部分开发工具。当用户把某个域名指给 Cursor、Claude Code 这类工具时,它们会读这个文件。对做技术文档的站点,这是一群规模不大但意图明确的读者。

结论:把它当成给 AI 工具看的说明书,而不是给搜索引擎看的排名文件,预期就对了。

外贸站要不要做

结论:可以做,但排在内容和结构之后,不要为它单独排期。

判断标准很直接。如果站点已有清晰栏目、可抓取正文、能回答具体问题的页面,那么加一份文件是半小时的事,顺手做了没有坏处。如果页面零散、正文靠图片、参数放在 PDF 里,文件写得再漂亮也没用,模型打开链接看到的还是空页面。

值得做的情况

  • 有稳定栏目结构,核心页在 20 个以上
  • 面向海外客户,需要被英文 AI 工具正确识别业务范围
  • 有接口文档或技术资料

可以跳过的情况

  • 站点不足 10 个页面,整站抓一遍成本很低
  • 内容还在大改,索引会频繁变动
  • 目的是提升 Google 排名

怎么写一份能用的 llms.txt

结论:H1 写站点名,一句话说清业务,再按栏目分节列链接,全文控制在 10KB 以内。

格式上没有强制规范,社区约定大致四层:第一行写站点名称;紧跟一句摘要说明这是什么站、服务谁;然后用二级标题分节,每节列 3 到 10 条链接并附一句说明;最后可留一节标记可选内容。

几个容易写错的地方:

  • 把所有 URL 都塞进去。它是精选索引,不是第二个 sitemap,通常 20 到 50 条足够。
  • 只写链接不写说明。链接后面跟一句「这条讲什么」,模型才知道优先级。
  • 写与实际不符的承诺。文件说提供免费诊断,页面却没有入口,这种不一致比不写更糟。

本站已经部署了一份,可以直接打开 微功夫 llms.txt 看实际写法,提案原文见 llmstxt.org。

结论:文件内容必须和站点实际页面一致。它降低的是理解成本,不是掩盖内容缺口。

怎么验证有没有生效

结论:看服务器访问日志,不要在后台面板里找 AI 收录指标,那个指标不存在。

做法是在 nginx 或 Apache 的访问日志里筛 AI 爬虫的 UA,观察这个路径的请求来源与频次。一个月内零请求说明目标读者没来,这份文件目前只是备着。这跟做外贸 GEO 的判断一致:AI 引用依赖可抓取、可摘录、可验证三件事,它只作用在第一环的边缘。基础概念见GEO 是什么。

llms.txt 和外贸 GEO 是什么关系

结论:llms.txt 是 GEO 的辅助项,不是主线。

真正决定 AI 是否引用你的,是页面有没有把问题回答完整、事实是否带单位和时间、实体信息是否前后一致。这些属于内容与结构层面,具体拆解在外贸 GEO 优化和外贸 GEO 指南里。它能做的,是让愿意读它的工具少走弯路,不改变内容质量本身。

下一步该按什么顺序做

如果决定做,顺序是:先确认 robots.txt 没有误拦、sitemap 能正常访问,再写这份文件,最后在日志里观察请求,三步大约半天。需要判断现有站点的 GEO 基础,可以从GEO 技术优化这份检查项开始。

常见问题

llms.txt 是官方标准吗?

不是。它是 2024 年 9 月提出的社区提案,没有被 W3C 或任何搜索引擎采纳为规范。Google 明确表示不使用,其他厂商面向站长的文档只讲 robots.txt,没有把它列为信号。

做了 llms.txt 会被 ChatGPT 推荐吗?

不能保证。目前没有主流 AI 厂商确认把它作为答案选择的依据,实际读取的多是编码代理类工具。它降低的是理解成本,不直接产生引用。

llms.txt 和 sitemap.xml 要写一样的内容吗?

不一样。sitemap 求全,列出全部可索引地址;llms.txt 求精,通常 20 到 50 条,按重要性排序并附一句说明。

外贸站没有开发者文档,还值得做吗?

值得顺手做,但优先级低于页面内容和抓取基础。如果站点不足 10 个页面,整站被抓一遍成本很低,可以跳过。

怎么知道有没有 AI 读过这个文件?

看服务器访问日志里该路径的请求 UA,按来源与频次统计。一个月内零请求说明还没人读,属于当前常态。

来源与说明