llms.txt 是什么?它对 AI 搜索有帮助吗?
llms.txt是为AI工具列出网站重要页面的Markdown文件。Google搜索不使用它,我们也没有发现它能让网站更容易被AI引用的证据。
llms.txt 是放在网站根目录中的纯 Markdown 文件,例如 connu.ai/llms.txt。它概括网站内容,并链接到最有用的页面,让 AI 工具不必穿过菜单和脚本就能了解网站。Google 搜索不使用这份文件,我们查看的 AI 搜索引擎也没有将它列为进入回答的条件。如果几分钟就能完成,可以添加;但不要指望它让网站因此获得引用。
llms.txt 是什么
名称来自 LLMs,也就是 ChatGPT、Claude 和 Gemini 等工具背后的大语言模型。Jeremy Howard 于2024年9月3日提出 llms.txt,提案的第二版于2026年8月10日发布。文件放在网站根目录,用 Markdown 编写,其中只有第一行是必需的:
- 用 H1 写出网站或项目名称,这是唯一必需的部分;
- 用引用区块写一段简短概述;
- 可选的补充说明段落;
- 用
##作为分节标题,每节列出链接,并附简短说明。
下面是我们这份文件开头的内容,文字已译为中文便于说明:
# Connu
> Connu 通过网站、搜索和托管式外联,帮助加拿大中小企业被发现,并接触合适的潜在客户。
Connu 是一家立足多伦多、服务加拿大中小企业的数字服务机构。……
## 服务
- **多渠道 B2B 外联**——通过托管式服务,接触目标明确的企业买家。……
- **网站与搜索优化**——为您现有的网站进行重新设计,……
llms.txt 与 robots.txt、sitemap.xml 有什么不同
这3个文件都位于网站根目录,但作用不同。
| 文件 | 用途 | 谁会读取 |
|---|---|---|
| robots.txt | 告诉爬虫可以抓取哪些网址 | 搜索引擎和 AI 爬虫;Google、OpenAI 和 Perplexity 均有相关说明 |
| sitemap.xml | 列出希望被抓取的页面 | 搜索引擎,Google 的文档对此有说明 |
| llms.txt | 用 Markdown 概括网站并链接到重要页面 | 主动选择查找这份文件的 AI 工具和代理 |
robots.txt 和网站地图属于搜索引擎明确说明的抓取机制。llms.txt 则是一项提案,工具可以选择采用,也可以忽略。
Google 会使用 llms.txt 吗
不会。Google 关于搜索生成式 AI 功能的指南于2026年7月10日更新,说明搜索不使用 llms.txt 之类的 AI 文本文件,发布这类文件既不会改善,也不会损害网站的可见度或排名。Google 关于 AI 功能的另一份说明补充指出,页面要进入 AI Overviews 或 AI Mode,只需被收录,并具备展示搜索摘要的资格。
llms.txt 能让 ChatGPT、Perplexity 或 Gemini 引用网站吗
从以下3方面,我们都没有找到能证明这一点的证据。
AI 公司自己的文档。OpenAI 的爬虫文档说明,拒绝 OAI-SearchBot 的网站不会显示在 ChatGPT 搜索回答中,这通过 robots.txt 控制。Perplexity 的文档说明,要出现在其搜索结果中,应在 robots.txt 中允许 PerplexityBot。两份文档都没有把 llms.txt 列为因素,尽管两家公司都为自己的开发者文档发布了 llms.txt 索引。
对300,000个域名的研究。SE Ranking 检查了约300,000个域名,其中10.13%有 llms.txt。研究没有发现拥有该文件与域名被 AI 引用的频率之间存在关联;在移除 llms.txt 这个变量后,其预测模型反而更准确。
我们自己的数据。connu.ai 自2026年9月15日起提供 llms.txt。在截至2026年10月6日的30天观察期内,Cloudflare AI Crawl Control 记录到 AI 和搜索爬虫对 connu.ai 及共同托管的网站发起了超过2,000次请求,其中517次请求 sitemap.xml。对 /llms.txt 的请求为0次。
2026年10月6日,我们还向 ChatGPT、Gemini、Google AI Mode 和 Perplexity 提出了33道题,每题重复3次,并统计10家机构在未直接点名该机构的问题中被提及的次数。在这类293条回答中,Connu 被提及0次。10家机构中,6家的网站有 llms.txt,而被提及最多的两家中,一家有、一家没有:
| 机构 | 是否有 llms.txt | 在回答中被提及的次数 |
|---|---|---|
| 机构 A | 否 | 374条中的24次 |
| 机构 B | 是 | 374条中的19次 |
| 机构 C | 否 | 374条中的15次 |
| 机构 D | 否 | 374条中的4次 |
| 机构 E | 是 | 374条中的3次 |
| 机构 F | 是 | 386条中的1次 |
| 机构 G | 否 | 386条中的0次 |
| 机构 H | 是 | 386条中的0次 |
| 机构 I | 是 | 386条中的0次 |
| Connu | 是 | 293条中的0次 |
10个网站是一个较小的样本,知名机构也可能因为多种原因被提及。这张表能够说明的是:是否拥有该文件,并没有决定哪些机构被提及。
谁会使用 llms.txt
对主动读取网站内容的工具来说,这份文件可能有用;它并非供搜索引擎决定排名或引用的依据:
- 阅读文档的 AI 助手和代理。提案网站提到,文档平台会自动生成 llms.txt;OpenAI 和 Perplexity 也为自己的开发者文档发布了这份文件。
- Chrome Lighthouse。2026年5月1日发布的 Lighthouse 13.2.0增加了 Agentic Browsing 分类,会检查网站的 llms.txt 是否遵循建议格式。Lighthouse 说明,该分类仍在开发中,可能继续调整。
应该添加 llms.txt 吗
如果几分钟就能完成,可以添加。我们会为自己建设的网站生成这份文件,并使用与网页相同的内容来源,确保它不会与网站说法不一致。但不建议为“优化 llms.txt”额外付费,也不应期待它改变 ChatGPT 或 Google AI Overviews 对企业的回答。
影响 AI 回答的基础工作,与改善搜索可见度的工作有很多共同之处:
- 允许爬虫访问,并让页面被收录。Google 的 AI 功能说明指出,AI Overviews 和 AI Mode 使用已收录且具备摘要展示资格的页面。OpenAI 文档则说明,ChatGPT 搜索会排除屏蔽 OAI-SearchBot 的网站。
- 回答客户真正会问的问题,并建设能够覆盖这些搜索需求的页面。
- 出现在 AI 寻找推荐的平台上:您所在行业的评价网站、目录和榜单。对本地企业而言,应先关注 Google 地图和评价;承包商 SEO 指南对此有更详细的介绍。
- 发布具体的一手信息:价格、流程、时间,以及实际测量的结果。
这些也是我们 SEO 服务的工作核心。
如何创建 llms.txt
- 按上述格式手动编写:网站名称、一句话概述,再列出最重要页面的链接,并简要说明每个页面提供什么内容。
- 将文件保存为
llms.txt,放在网站根目录,确保可以通过yourdomain.com/llms.txt访问。 - 让它与网站同步。如果网站由代码构建,可以像我们一样,从与页面相同的内容来源生成该文件,避免信息逐渐不一致。
如何检查网站的 llms.txt
- 在浏览器中打开网站地址,并在后面加上
/llms.txt。如果文件不存在,会返回错误页面。 - 在 Chrome DevTools 中运行 Lighthouse,查看 Agentic Browsing 分类。
- 使用我们的免费网页评分工具。llms.txt 是其中一项 AI 就绪检查,同时也会检查更直接影响被发现的因素:爬虫访问、速度和结构化数据。