跳到正文
原文
AGI Hunt· TejasKumar_·· 2 小时前AI 评分32

开发者吐槽 Anthropic 爬虫 Claudebot 日访问其网站超 28 万次

开发者吐槽 Claudebot 爬虫日访问其网站超 28 万次

AI 导读

开发者 Tejas Kumar 发帖质疑 Anthropic 的爬虫 Claudebot 每天访问其网站超过 28 万次,感叹流量高得离谱。这条帖反映出 AI 爬虫激进抓取给中小站点带来的负载压力,也是近期社区围绕 AI 训练数据抓取与 robots.txt 争议的又一实例。

来源:AGI Hunt · agihunt.info