AI 可读性体检
输入你的页面网址。我们去抓这个页面、它的 robots.txt 和 llms.txt,跑八项检查,把每一条结果都列出来 —— 包括不通过的。不给分数,不用注册。
高级 —— 检查一个你手上已有的页面
八项检查各自在测什么
每一项都是你手工也能执行的规则,所以规则就写在这里。其中两项背后有引用率对比 —— 结构化数据 36% 对 10%,爬虫放行 32% 对 7%。右列是 48 条来源上与「是否被引用」的秩相关;在这个样本量下,低于 0.285 的都和噪音分不开 —— 这就是为什么八项里有六项只是卫生习惯,不是结论。打勾的那两项才有引用率对比。
关于这套检查的问题
这八项检查分别是什么?
robots.txt 里的爬虫放行、llms.txt 是真文件还是假 200、结构化数据、字数、问答块、摘要块、meta 描述、标题结构。页面、/robots.txt 和 /llms.txt 都由我们去抓,你只需要输入一条网址。
我输入的网址会被怎么处理?
我们的 worker 会去抓那个页面,以及同一域名下的 /robots.txt 和 /llms.txt,跑完八项检查把结果返回。页面内容不落库,也不建账号。结果在边缘缓存五分钟,所以重复查同一条网址不会再打你的服务器。
可以查一个不是我的页面吗?
可以。这套检查只读一个公开页面上任何爬虫都能读到的内容,所以只要网址能打开就行。想让这个页面进我们的收录站,那是另外一次提交。
全绿就代表会被引用吗?
不代表。八项里只有结构化数据和爬虫放行是我们拿引用率测过的。其余六项是卫生项:让页面更容易被摘走,但我们没测过它们是否真的提高引用。我们宁可这么说,也不卖你一个分数。
抓不到页面怎么办?
有些站会拦自动请求,有些页面要登录才能看,还有些内容完全靠 JavaScript 渲染。遇到这些情况我们会如实报出失败,而不是瞎猜;你可以把页面源码粘进上面的高级区,在浏览器里跑同样这八项。
我没有 robots.txt 怎么办?
那一行会写「默认开放」,而不是猜。没有 robots.txt 意味着所有爬虫都允许进来 —— 这和「被拦住」是两个不同的结论。