llms.txt 是一个放在网站根目录的纯文本文件,用 Markdown 写。它不是给搜索引擎看的,是给大模型看的:告诉 AI 这个站是做什么的、有哪些核心页面、每个页面分别讲什么。

路径是固定的:你的域名后面加 /llms.txt。

为什么需要它

AI 抓一个网站,成本并不低。要渲染页面、剥掉导航和广告、从大段排版里把正文捞出来。很多企业站结构杂乱,AI 抓到一半就放弃,或者抓到的内容和实际对不上。

llms.txt 相当于你主动交一份摘要:不用猜,照这个读。它不改变网页本身,只是给 AI 一条更短的路径。

里面通常写什么

结构很简单,四段就够:

  • 一级标题写站点或品牌名。
  • 一句引用块,用一句话说清定位:面向谁、解决什么问题。
  • 一个页面列表,每条写上名称、链接和一句话说明。
  • 一句说明,讲清这份文件和官网同步,有差异以网页为准。

和 robots.txt、sitemap 的区别

  • robots.txt 说「谁能抓、不能抓什么」,是门禁。
  • sitemap.xml 说「我有哪些页面」,是目录。
  • llms.txt 说「我是谁、这些页面分别讲什么」,是自我介绍。

三个文件不冲突,各管一段,可以同时存在。

怎么做一个

不需要写代码,也不需要懂 Markdown 语法。把品牌名、一句话定位、域名和几个主要页面填进去就能生成,生成的文本复制下来,放到网站根目录即可。

别指望它包治百病

llms.txt 是加分项,不是决定项。它让 AI 更容易读懂你,但读懂之后愿不愿意引用,取决于内容质量和第三方信源。

见过不少站加了 llms.txt,AI 依然不推荐——因为页面里没有一句能被直接引用的话。工具能帮你把门打开,走不走得进去是另一回事。