8.0
热点
AI SCORE
技术实践2026-11-19 15:03
要加 llms.txt 吗?53 站抽查给出依据
dev.to · AI#llms.txt#网站审计#搜索优化
Editor brief · 编辑速览
作者发现,Google 搜索会忽略 llms.txt,Lighthouse 只校验格式,文件缺失时该检查项标为不适用。抽查的 53 个站点中有 25 个提供有效文件,多数是开发者平台。
文章思维导图
Knowledge map
AI brief
原文暂未完整获取,基于公开信息的快读
dev.to 的一篇文章核对了 Google 搜索指南和 Lighthouse 的审计源码,还抽查了 53 个站点。按 Lighthouse 的规则,25 个站点在根路径提供了有效的 llms.txt,其中多数是开发者平台。Google 搜索明确忽略这份文件,Lighthouse 则会检查它的格式。
目前能确认什么
llms.txt 是一份 Markdown 导览,可以列出站点简介和重要页面。它和 robots.txt 分工不同。前者告诉工具有哪些内容可看,后者给爬虫声明抓取规则。
按作者核对的 Google 指南,添加这份文件对搜索排名、AI Overviews 和 AI Mode 都没有影响。Lighthouse 检查的是站点根路径下的 /llms.txt。文件缺失时,该项标为「不适用」。文件通过时,只能说明它符合审计规则,连链接能否打开都没有验证。
我的判断
文档站可以把它当成一份给人和工具用的入口索引。如果文档构建流程能从现有导航生成它,页面迁移时就可以一起更新。普通业务站如果只是为了通过 Lighthouse 审计,没有必要单独维护一份文件。
站点发布了文件,只能说明它提供了这个入口。 作者没有找到 OpenAI、Anthropic 或 Perplexity 声明其爬虫会读取 llms.txt。哪些工具会主动请求它,以及读到以后会不会用里面的链接选取页面,还要等各家的文档或实际观测确认。