一句话看懂:llms.txt 是一份拟议中的网站级 Markdown 文件,旨在告诉 AI 系统优先读取哪些页面。但 2026 年的数据显示,主流 AI 平台并未确认采用,实际被读取率极低,Google 也已明确表态不支持。
事件核心:发生了什么
llms.txt 是一项由社区提出的非正式方案,要求在网站根目录放置一个 Markdown 文件,列出站点最重要的页面及一句话描述,帮助大模型和 AI 智能体快速理解网站结构。然而,2026 年的多项数据表明,它距离“标准”还很远。
SE Ranking 对 30 万个域名的研究发现,llms.txt 的实际部署率仅约 10.13%;在 AI 引用最多的 50 个域名中,只有 1 个部署了该文件。Limy.ai 对 90 天内超过 5 亿次 AI 机器人访问事件的分析显示,直接请求 /llms.txt 的请求仅有几百次,GPTBot、ClaudeBot、PerplexityBot、OAI-SearchBot 和 Google-Extended 等主流爬虫仍以抓取 HTML 为主。
关键表态来自 Google。搜索团队成员 Gary Illyes 确认 Google 不支持 llms.txt 且无计划支持;John Mueller 将其与已被弃用的 keywords meta 标签相提并论。截至 2026 年,没有一家主流 AI 公司公开承诺在生产环境中读取或执行 llms.txt。此外,HTTP Archive 的 2025 Web Almanac 发现,约 40% 已发布的文件是插件生成的默认内容,而非人工精心编辑的清单。
为什么重要
llms.txt 的现状折射出 AI 时代网站协议制定权的争夺。与 robots.txt 这类被广泛遵守的行业惯例不同,llms.txt 缺乏权威标准组织(如 W3C、IETF)背书,也没有执行机制。AI 公司是否采纳,完全取决于自身利益与爬取策略。
对内容生态而言,这意味着“告诉 AI 读什么”的主动引导方式尚未获得主流信任。Google 的技术路线更倾向于自行判断页面重要性,而非接受网站方的推荐清单。如果 llms.txt 最终无法获得关键平台支持,它可能成为类似 keywords meta 标签的过渡性尝试。
对用户/开发者/创作者的影响
尽管证据不充分,部署一份 llms.txt 仍然是低成本的选择。它大约需要二十分钟,不会对现有 SEO 造成负面影响,同时保留了一个“不对称期权”:如果未来智能体路由开始标准化读取机器可读的站点表面,提前布局者将占据先机。
AI 工具推荐
想把多个 AI 模型放在一个入口?
GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。
推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。
更实际的价值在于编写过程本身。为最重要的 40 个页面撰写一句话描述,能帮助开发者发现内容重复、孤立页面等问题,相当于一次免费的内容审计。它也可以作为“面向智能体的商业名片”,帮助 AI 理解公司业务范围和权威页面位置,而非单纯追求搜索引擎引用。
需要明确的是,llms.txt 不能替代 robots.txt。前者是建议性的“请先读这些”,后者是约束性的“禁止访问这些”,两者不存在冲突。若目标是限制 AI 抓取,应依赖 robots.txt 和网站服务条款。
值得关注的后续
观察点之一:是否有主流 AI 公司公开承诺支持 llms.txt。如果 OpenAI、Anthropic 或 Perplexity 中的任何一家正式表态,将显著改变该文件的实际价值。观察点之二:Google 的生成式 AI 文档是否会持续将 llms.txt 列为“不必要的策略”,这将直接影响大量站长的部署意愿。观察点之三:部署质量能否改善——如果低质量、插件生成的默认文件持续泛滥,可能会进一步削弱该方案的可信度,使其进入恶性循环。


