花钱买的助手，连公开网页都打不开。 《纽约邮报》的 robots.txt 里，Anthropic 的五个爬虫身份全在黑名单上：训练、搜索、连你让 Claud… · @chenYijl · TwKit

@chenYijl

花钱买的助手，连公开网页都打不开。 《纽约邮报》的 robots.txt 里，Anthropic 的五个爬虫身份全在黑名单上：训练、搜索、连你让 Claude 代取文章的那一个，也一起拦了。 这不是孤例：10 月 19 日有人实测 52 家大媒体，Claude 被拦 28 家，OpenAI 只被拦 16 家；CNN 更直接，对 Claude 回一个 451。 robots.txt 本是君子协定，可守规矩的反而最吃亏：Anthropic 自己说，绝不绕过，验证码也不碰。 你让 Claude 帮你开过文章吗，有没有也被哪家媒体拦在门外过？

曝光 28 · 评论 1 · 点赞 0 · 书签 0