无视网站反AI抓取政策,Anthropic爬虫引起多个网站所有者不满

据 The Verge 当地时间 26 日报道,Anthropic 公司使用的 ClaudeBot 在短短 24 小时之内,就访问了 iFixit 网站近百万次,此举违反了该网站的使用条款。
这一显得有些疯狂的举动,引起 iFixit 的 CEO Kyle Wiens 直接在 X(推特)上开怼,
“如果这些请求(指访问)中的任何一个访问了我们的使用条款,那么它会告诉你我们的内容被明确禁止使用。别问我,去问 Claude!”
“我知道你渴望获得数据,Claude 也真的很聪明!但是,你真的有必要在 24 小时内访问我们的服务器 100 万次吗?你不仅在不付费的情况下获取我们的内容,还占用了我们的 devops 资源,一点都不酷!”
“如果你想要跟我们谈谈内容许可和商业用途的话,我们就在这呢。”

iFixit 的使用条款政策声明,“未经公司事先明确的书面许可,严格禁止复制、复制或分发”网站上的任何内容,特别包括“用于训练机器学习或 AI 模型”。
Wiens 此后表示,iFixit 已经在其 robots.txt 文件中添加了“爬行延迟”扩展。
然而,iFixit 并非唯一的受害者。Read the Docs 联合创始人 Eric Holscher 和 Freelancer.com CEO Matt Barrie 在 Wiens 的帖子中表示,他们的网站也曾被 Anthropic 的爬虫频繁抓取。
这些行为并非 ClaudeBot 的“初犯”。早在今年 4 月,Linux Mint 网站论坛就将一次网站故障归因于 ClaudeBot 的抓取活动造成的压力。
关键词: ClaudeBotAI爬蟲
更多推荐

在当今这个瞬息万变的时代,科技的迅猛发展正在深刻地改变着我们的生活方式,而交通安全作为一个关乎社会发展的重要因素,也正逐渐被新技术所重塑。近年来,自动驾驶、智能交通系统、车联网等先进技术如雨后春笋般涌现,它们不仅提高了出行效率,也在潜移默化

了解更多 >

每到春秋交替的季节,公园里的花朵争相绽放,树木也开始披上新绿。然而,对许多季节性过敏患者来说,这个时候往往是“过敏大军”集结的时刻。鼻水、打喷嚏、眼睛发痒、呼吸急促等症状如期而至,给他们的日常生活带来困扰。如何有效减少这些过敏症状,成为了许

了解更多 >

民俗传说是人们在长期生活实践中逐渐积淀下来的一种文化表达方式,它们穿越时间的长河,以生动而富有象征意义的故事形式,承载着人们对生活、自然与社会的理解。在这些传说背后,隐藏的不仅是故事中的人物与奇闻异事,更是一种文化的深层寓意。这些寓意如同隐

了解更多 >

猫,作为人类最喜欢的宠物之一,伴随着它们多样的品种和丰富的性格而深深融入我们的生活。从活泼调皮的家庭小精灵,到优雅独立的贵族宠儿,每一种猫咪都带着自己独特的气质和需求。了解不同品种的性格特点和护理方式,不仅能够让我们更好地呵护它们,更能在相

了解更多 >

据外媒 TechRader 报道,富士通详细介绍了计划于 2027 年出货的 FUJITSU-MONAKA(以下简称 MONAKA)处理器。MONAKA CPU 基于“云原生 3D 众核”架构,采用 Arm 指令集,面向数据中心、边缘与电信

了解更多 >