Claude 拒绝无视 robots.txt，用户忧 AI 过度合规成控制工具

Claude 拒绝了用户「忽略 robots.txt」抓取新闻的要求，因 NY Post 和 The Mirror 已在 robots.txt 中点名禁止 Claude 抓取。发帖者担忧 AI 正走向「机械化全面合规」，未来 Claude 可能以「违反 Google 政策」为由拒绝 SEO 外链类工作，甚至自动执行罚款规则。只有 AI 公司控制者被允许打破规则。