Hacker News AI· shahidsaleem·· 2026-10-12AI 评分40
Crawlable 审计 50 个顶级 Web 应用的 AI 爬虫可读性
Crawlable – We audited 50 top web apps for AI crawler readability
AI 导读
Crawlable 对 50 个顶级 Web 应用进行审计,发现其中 46 个可测量站点的 AI 可读性中位数为 55 分,无一达到 90 分以上的 A 级。 仅 14 个站点提供合规的 llms.txt 文件,14 个站点存在空 JavaScript 外壳页面,导致 AI 爬虫难以获取完整内容。
来源:Hacker News AI · usecrawlable.com