#Cloudflare 推出 AI 爬虫红黑榜，OpenAI 爬虫因比较规范目前排名最高，而字节跳动、Anthropic 和 xAI Grok 爬虫几乎没有验证因此垫底。 目前红黑榜仅收录 6 家 AI 公司爬虫，接下来还会收录更多 AI 爬虫、RAG 和搜索引擎爬虫并给出评分。查看全文：