无视网站反AI抓取政策，Anthropic爬虫引起多个网站所有者不满

生成时间：2024-07-30 08:53:51 浏览次数：631

据 The Verge 当地时间 26 日报道，Anthropic 公司使用的 ClaudeBot 在短短 24 小时之内，就访问了 iFixit 网站近百万次，此举违反了该网站的使用条款。

这一显得有些疯狂的举动，引起 iFixit 的 CEO Kyle Wiens 直接在 X（推特）上开怼，
“如果这些请求（指访问）中的任何一个访问了我们的使用条款，那么它会告诉你我们的内容被明确禁止使用。别问我，去问 Claude！”

“我知道你渴望获得数据，Claude 也真的很聪明！但是，你真的有必要在 24 小时内访问我们的服务器 100 万次吗？你不仅在不付费的情况下获取我们的内容，还占用了我们的 devops 资源，一点都不酷！”

“如果你想要跟我们谈谈内容许可和商业用途的话，我们就在这呢。”

iFixit 的使用条款政策声明，“未经公司事先明确的书面许可，严格禁止复制、复制或分发”网站上的任何内容，特别包括“用于训练机器学习或 AI 模型”。

Wiens 此后表示，iFixit 已经在其 robots.txt 文件中添加了“爬行延迟”扩展。

然而，iFixit 并非唯一的受害者。Read the Docs 联合创始人 Eric Holscher 和 Freelancer.com CEO Matt Barrie 在 Wiens 的帖子中表示，他们的网站也曾被 Anthropic 的爬虫频繁抓取。

这些行为并非 ClaudeBot 的“初犯”。早在今年 4 月，Linux Mint 网站论坛就将一次网站故障归因于 ClaudeBot 的抓取活动造成的压力。

更多推荐

在现代快节奏的生活中，保持健康的生活习惯常常被忽视。随着科技的发展，生活方式的转变，让更多人产生了健康方面的问题。想要拥有良好的身体和心理状态，以下几个生活习惯不可小觑。规律的作息是健康生活的基础。研究表明，成年人每天需要保持七到九小时的睡

凌晨两点，手机屏幕突然亮起，177开头的号码在黑暗中格外刺眼。张女士盯着那串数字犹豫了三秒，最终还是按下了接听键。电话那头传来机械女声：“您的快递丢失，请点击链接领取赔偿……”这个场景，或许正在全国无数个家庭中同步上演。当我们谈论电信诈骗时

猫，这种优雅而神秘的生灵，早已成为人类生活中不可或缺的一部分。从古老的传说到现代家庭的温馨角落，猫咪以其各异的面貌和性格，为人们带来了无尽的欢乐与思考。不同的品种，仿佛是大自然为我们精心雕琢的杰作，每一种都具有独特的外貌特征和丰富的内在性格

在这个快速变化、信息爆炸的时代，青少年的成长轨迹似乎比以往任何时候都更加复杂与多元。学业压力、社交焦虑、家庭矛盾，以及对未来的迷茫，无不在无形中对他们的心理健康产生冲击。青少年的心理健康问题，逐渐成为公共关注的焦点，也催生了各种各样的教育尝

在当今智能化飞速发展的时代，自动驾驶技术已成为汽车产业和科技创新的热点。而在自动驾驶的众多技术路线中，视觉自驾方案和激光雷达自驾方案无疑是两大主流选择，它们各自具有独特的优势和适用场景，共同推动着自动驾驶技术的进步。视觉自驾方案，顾名思

十大不可忽视的健康生活习惯