两份 llms.txt 采用率统计差着一倍多,先按哪份口径排工作量
不同机构给出的 llms.txt 采用率差距很大,站点该按哪份口径决定投入?先别看百分比,先看分母。当天能核到的几份研究里,读数的确差着一倍甚至数倍:按近三十万个域名统计的是 10.13%,只看头部一千个域名的是 9.3%,而一份两千三百余个站点的抽样给出的放置率是 49.2%。三个数字都成立,成立的原因不同。
差距来自分母而不是结论
| 研究口径 | 样本 | 放置率读数 | 能回答什么 |
|---|---|---|---|
| 按大范围域名抽样 | 近三十万个域名 | 10.13% | 整个域名池的普遍程度 |
| 只看头部域名 | 前一千 / 前一万个 | 9.3% / 8.3% | 头部站点是否已跟进 |
| 特定站点集合抽样 | 2,339 个站点 | 49.2% | 这一类站点里的采用情况 |
| 分行业看放置 | 头部样本按行业切 | 旅行类 16.0% | 自己所在行业是否已有同行在做 |
第三行最容易误读。样本量只有两千多、且站点集合由研究者选取时,放置率会明显偏高,它说明的是「在这批站里已接近一半」,不能当成整网水平。把 49.2% 与 10.13% 直接比较,得到的「差四倍」其实来自两套分母,不是同一件事的两个答案。
同一份头部口径的内部数据反而更稳定:前一千个域名 9.3%、前一万个 8.3%,差距不到一个百分点,说明头部范围越宽,放置率越低,这类曲线适合用来看自己站点的量级落在哪一段。
两份研究各自能回答什么
采用率回答的是「要不要现在做」,而不是「做了有没有用」。前者需要看同行是否已经布局;后者需要另一种证据。近三十万域名那项研究同时给了结论:无论统计分析还是机器学习,都没有观察到 llms.txt 对域名被大模型引用频率的影响。
放置之后是否被读取,还有一组更直接的数据:一份基于十七万余个域名服务器日志的研究显示,97% 的 llms.txt 文件在当月没有收到任何请求。也就是说,文件在不在,和有没有被读到,是两件事。
把三组读数串起来,决策口径就清楚了:采用率用于判断是否跟风,效果读数用于判断是否值得投入人力,日志读数用于判断已放置的文件是否真的起作用。
放置率之外更该看的指标
按这三个指标排工作量,比按采用率排更省力。第一项是被读到:检查服务器上有没有针对该路径的请求记录,没有记录时讨论内容质量没有意义。第二项是内容是否对得上:文件里的站点结构、分类与入口,要与站点地图一致,站点改版后失效的说明文件比没有文件更容易误导。第三项是维护成本:能否随内容自动更新,决定它会不会在半年后变成过期页面。
AnQiCMS 的站点侧把前两项的成本压得较低:llms.txt 支持自动生成,便于大语言模型理解站点内容结构;Sitemap 同样自动生成,把两者放在一起核对,可以避免说明文件与实际页面脱节。这类任务一次配置后按季度复核即可,不需要按周投入。
该怎么排这一项的投入
按当前读数,合理的排序是:先确认站点地图有效、内容结构清晰、正文段落自包含,这三项直接影响能否被摘录;再放开 llms.txt 的自动生成,作为一次性配置;最后才去看采用率类统计。头部口径里的旅行类行业放置率 16.0%,如果同行都已布局,跟进的意义在于不落后,而不在于指望它单独改变引用结果。
常见问题
采用率数字冲突,该信哪一份? 先比样本量与选取方式。头部域名、随机域名池、研究者自选站点三类样本不可互换,选与自己站点量级接近的那份参考。
已经放了 llms.txt 却没被引用,要删掉吗? 不必删除,但别指望它单独起作用。先查日志里有没有被读取,再查文件内容是否仍与站点结构一致。
多久复核一次? 按站点变更频率。内容结构或分类有调整时复核一次,其余按季度检查,配合自动生成可以把它压成一项低维护成本配置。