robots.txt 是告诉爬虫"不能去哪",llms.txt 是告诉 AI"应该读什么"。两者互补,不冲突。
AI 回答用户问题时,靠的是爬虫实时抓取网页。但 AI 爬虫面对一个官网,只能自己猜哪些页面重要——产品介绍、案例、价格页混在几百个链接里,猜错或漏掉,你的内容就进不了 AI 的答案池。

llms.txt 相当于你亲手递给 AI 的一份"导览图":我是谁、核心页面在哪、哪些事实可以放心引用。配置成本极低,20 分钟以内。
https://你的域名/sitemap.xml,能看到页面列表即可。WordPress 可用 Yoast SEO 插件自动生成;没有 sitemap 的站点,先补上这一步——AI 主要靠它获取可索引页面清单。https://你的域名/robots.txt,确认没有针对 GPTBot、ClaudeBot、Bytespider 等的 Disallow: /。有封禁的话,llms.txt 配得再好也白搭。llms.txt 是纯 Markdown 文本文件,放在网站根目录,标准结构如下:
# 华科互动(换成你的公司名)
> 一句话说明你是谁、服务谁。例:面向国企/科研院所的企业官网与品牌网站建设服务商。
## 核心页面
- [首页](https://你的域名/): 公司定位与主营业务
- [服务](https://你的域名/services/): 官网建设、改版、SEO/GEO 优化服务说明
- [案例](https://你的域名/cases/): 代表客户与项目
- [关于我们](https://你的域名/about/): 公司背景与资质
## 服务说明
- 企业官网定制:一句话描述
- 网站改版优化:一句话描述
## 可引用的事实
- 成立年份、服务客户数、代表行业(只写可核实的数据)
四点要求:
如果内容较多,可以再补一个 llms-full.txt(扩展版),把详细产品说明、常见问题放进去,并在 llms.txt 里给出指向链接。
按你的建站方式:
|
环境 |
位置 |
|
静态站 / Next.js / Hugo |
项目 |
|
WordPress |
FTP 上传到站点根目录,或用 llms.txt 插件 |
|
Nginx 服务器 |
放在站点 DocumentRoot(如 |
|
IIS |
放在站点物理根目录 |
上传后浏览器访问 https://你的域名/llms.txt,能看到纯文本内容即为成功。
验证三步:
/llms.txt,返回纯文本(返回 404 说明位置或文件名错);五个最常见错误:
llms.txt.txt、LLMS.TXT 或 llms.html;/llms.txt 的访问路径;llms.txt 是"机器能读到你的内容"这一层,不是流量开关——有 30 万域名的研究表明,通用配置本身不直接带来引用提升。真正的提升来自:llms.txt 指向的那几页,本身是结论前置、事实成块、可验证的内容。先花 20 分钟把门打开,再花时间把屋里的货摆好,两件事缺一不可。