llms.txt 是一个放在网站根目录的纯文本文件,用 Markdown 写。它不是给搜索引擎看的,是给大模型看的:告诉 AI 这个站是做什么的、有哪些核心页面、每个页面分别讲什么。
路径是固定的:你的域名后面加 /llms.txt。
为什么需要它
AI 抓一个网站,成本并不低。要渲染页面、剥掉导航和广告、从大段排版里把正文捞出来。很多企业站结构杂乱,AI 抓到一半就放弃,或者抓到的内容和实际对不上。
llms.txt 相当于你主动交一份摘要:不用猜,照这个读。它不改变网页本身,只是给 AI 一条更短的路径。
里面通常写什么
结构很简单,四段就够:
- 一级标题写站点或品牌名。
- 一句引用块,用一句话说清定位:面向谁、解决什么问题。
- 一个页面列表,每条写上名称、链接和一句话说明。
- 一句说明,讲清这份文件和官网同步,有差异以网页为准。
和 robots.txt、sitemap 的区别
- robots.txt 说「谁能抓、不能抓什么」,是门禁。
- sitemap.xml 说「我有哪些页面」,是目录。
- llms.txt 说「我是谁、这些页面分别讲什么」,是自我介绍。
三个文件不冲突,各管一段,可以同时存在。
怎么做一个
不需要写代码,也不需要懂 Markdown 语法。把品牌名、一句话定位、域名和几个主要页面填进去就能生成,生成的文本复制下来,放到网站根目录即可。
别指望它包治百病
llms.txt 是加分项,不是决定项。它让 AI 更容易读懂你,但读懂之后愿不愿意引用,取决于内容质量和第三方信源。
见过不少站加了 llms.txt,AI 依然不推荐——因为页面里没有一句能被直接引用的话。工具能帮你把门打开,走不走得进去是另一回事。