无视网站反AI抓取政策,Anthropic爬虫引起多个网站所有者不满

据 The Verge 当地时间 26 日报道,Anthropic 公司使用的 ClaudeBot 在短短 24 小时之内,就访问了 iFixit 网站近百万次,此举违反了该网站的使用条款。
这一显得有些疯狂的举动,引起 iFixit 的 CEO Kyle Wiens 直接在 X(推特)上开怼,
“如果这些请求(指访问)中的任何一个访问了我们的使用条款,那么它会告诉你我们的内容被明确禁止使用。别问我,去问 Claude!”
“我知道你渴望获得数据,Claude 也真的很聪明!但是,你真的有必要在 24 小时内访问我们的服务器 100 万次吗?你不仅在不付费的情况下获取我们的内容,还占用了我们的 devops 资源,一点都不酷!”
“如果你想要跟我们谈谈内容许可和商业用途的话,我们就在这呢。”

iFixit 的使用条款政策声明,“未经公司事先明确的书面许可,严格禁止复制、复制或分发”网站上的任何内容,特别包括“用于训练机器学习或 AI 模型”。
Wiens 此后表示,iFixit 已经在其 robots.txt 文件中添加了“爬行延迟”扩展。
然而,iFixit 并非唯一的受害者。Read the Docs 联合创始人 Eric Holscher 和 Freelancer.com CEO Matt Barrie 在 Wiens 的帖子中表示,他们的网站也曾被 Anthropic 的爬虫频繁抓取。
这些行为并非 ClaudeBot 的“初犯”。早在今年 4 月,Linux Mint 网站论坛就将一次网站故障归因于 ClaudeBot 的抓取活动造成的压力。
关键词: ClaudeBotAI爬蟲
更多推荐

苹果公司最新推出的 iCloud Private Relay 服务,专为 iCloud+ 用户设计,旨在通过加密流量保护用户免受在线追踪器的侵害。然而,自上周四起,该服务在全球多个主要市场遭遇宕机,包括欧洲、印度、日本和美国,影响了部分 A

了解更多 >

在与我们心爱的宠物共享生活的日子里,健康问题是一个不可避免的话题。无论是可爱的狗狗、优雅的猫咪还是其他小动物,它们的健康往往直接影响到我们的生活质量。宠物虽无法言语,但它们的行为和外表常常能揭示出健康的秘密。那么,作为宠物主人,我们应该如何

了解更多 >

在科技迅猛发展的今天,智能汽车正成为未来交通的重要组成部分。它不仅改变着我们出行的方式,更在深刻影响着交通系统的各个方面。随着电动化、自动化和数字化技术的不断进步,智能汽车以其便捷、高效和环保的特点,正在逐步取代传统汽车,推动交通运输的变革

了解更多 >

在探索视觉识别的奥秘时,我们不得不提及两种截然不同的方式:人眼识别图像与人工智能识别图像。这两者虽都在尝试解读图像中的信息,但它们的运作机制、优势与局限却大相径庭。 人眼识别图像,这一过程似乎自然而然,甚至在我们尚未意识到时便已完成。当我

了解更多 >

在人类的生活中,宠物不仅仅是伴侣,更是亲密的家庭成员。随着社会的发展,宠物的角色日益重要,它们的心理健康也逐渐成为人们关注的焦点。不过,许多宠物主人可能并未意识到,宠物的心理健康同样需要关注,倘若忽视,可能会导致诸如焦虑、抑郁和行为问题等情

了解更多 >