跳到正文

llms.txt 社区提案 The llms.txt & llms-full.txt Proposal

词条 #613 / 700 · 第 13 章 · 13.1 AI 搜索产品矩阵与底层 RAG / 查询扇出机制(601–615)
一句话定义

由 Jeremy Howard(Answer.AI)于 2024 年提出的社区提案——注意它不是 W3C / IETF 正式标准,Google 搜索团队也已公开表示不使用:在网站根目录放置一个极简 Markdown 文件(yourdomain.com/llms.txt),用一页纸向大语言模型与 AI 智能体交代「这个站是什么、哪些页面最值得读」。

打个比方 Analogy

如果说 robots.txt 是门口保安手里的《闲人免进黑名单》,sitemap.xml 是塞满一万个货号条形码的《仓库流水账》,那么 llms.txt 就是总经理亲自写给 AI 贵宾的一页纸《本店精华浓缩导览手册(纯文字无广告版)》!AI 不用去啃你网页上复杂的导航栏、弹窗、CSS 代码,直接读这一份 Markdown 文件,3 秒钟就能把你的全盘家底和核心文档链接摸得门儿清!

岗位实战怎么做 In Practice

入职即可落地的加分操作(半小时搞定):

  1. 在网站根目录创建 https://yourdomain.com/llms.txt:按社区通用格式写 # 品牌/项目名称、> 一句话核心定位摘要、一段业务背景说明,然后按 ## Core Products、## Documentation & Guides、## Pricing & Comparison 分组列出全站最重要的 20–50 个页面链接,每条后面跟一句「这页讲什么」;
  2. (进阶可选)同时提供 /llms-full.txt,把核心帮助文档或产品手册的完整纯 Markdown 汇总成一个文件,供大模型或开发者一次性投喂进上下文窗口。注意 llms-full.txt 这个文件名本身也不在原始提案的明文规格里,属于社区惯例。

案例与避坑 Pitfalls

最大的误解是把它当成「AI 收录开关」。 截至 2026 年,没有任何主流 AI 厂商公开承诺其线上检索系统会读取 llms.txt;Google 搜索团队明确表态不使用,甚至建议把它设为 noindex。Anthropic、Cloudflare、Mintlify、Cursor 等公司确实在自己官网上放了这份文件,但那是它们在对外呈现自己的文档,不等于会读别人的。它的真实价值只有两个:几乎零成本地赌一个未来,以及倒逼你用一个句子说清「这个站到底是什么」——后者往往比文件本身更有用。决定你被不被引用的,始终是页面内容能不能被切成自足的片段。