无视网站反AI抓取政策,Anthropic爬虫引起多个网站所有者不满
据 The Verge 当地时间 26 日报道,Anthropic 公司使用的 ClaudeBot 在短短 24 小时之内,就访问了 iFixit 网站近百万次,此举违反了该网站的使用条款。
这一显得有些疯狂的举动,引起 iFixit 的 CEO Kyle Wiens 直接在 X(推特)上开怼,
“如果这些请求(指访问)中的任何一个访问了我们的使用条款,那么它会告诉你我们的内容被明确禁止使用。别问我,去问 Claude!”
“如果这些请求(指访问)中的任何一个访问了我们的使用条款,那么它会告诉你我们的内容被明确禁止使用。别问我,去问 Claude!”
“我知道你渴望获得数据,Claude 也真的很聪明!但是,你真的有必要在 24 小时内访问我们的服务器 100 万次吗?你不仅在不付费的情况下获取我们的内容,还占用了我们的 devops 资源,一点都不酷!”
“如果你想要跟我们谈谈内容许可和商业用途的话,我们就在这呢。”
iFixit 的使用条款政策声明,“未经公司事先明确的书面许可,严格禁止复制、复制或分发”网站上的任何内容,特别包括“用于训练机器学习或 AI 模型”。
Wiens 此后表示,iFixit 已经在其 robots.txt 文件中添加了“爬行延迟”扩展。
然而,iFixit 并非唯一的受害者。Read the Docs 联合创始人 Eric Holscher 和 Freelancer.com CEO Matt Barrie 在 Wiens 的帖子中表示,他们的网站也曾被 Anthropic 的爬虫频繁抓取。
这些行为并非 ClaudeBot 的“初犯”。早在今年 4 月,Linux Mint 网站论坛就将一次网站故障归因于 ClaudeBot 的抓取活动造成的压力。
更多推荐
用车之前,需要让发动机空转热车吗?
在寒冷的冬季早晨,很多车主都有一个习惯,那就是在启动车辆后,会先让发动机空转一段时间,也就是我们常说的“热车”。这种做法在老司机中尤为普遍,他们认为这样可以让发动机油液流动起来,达到工作温度,从而更好地保护发动机。但这种做法真的有必要吗?是
淋湿的狗为什么会抖干自己?
当一只狗抖掉皮毛上的水时,这一动作并非随意而为,也不是为了故意弄湿旁边的人。这是一种自然的生理反应,许多毛茸茸的哺乳动物,如鼠类、猫、松鼠、狮子、老虎和熊,都有这种本能反射。它们通过这种方式,可以迅速去除身上的水珠,保持身体的干燥和温暖。如
慢性低水平铅中毒:危害、挑战与应对策略
根据美国和加拿大多所大学及医院合作撰写的一篇新论文,慢性、低水平铅中毒是成人心血管疾病和儿童认知缺陷的主要危险因素,即便在过去被认为是安全的铅水平亦是如此。低水平铅中毒不仅会增加早产、认知缺陷、注意缺陷多动障碍(ADHD)、血压升高以及心率
什么是叠瓦式硬盘?一篇文章带你全面了解
在存储技术领域,硬盘作为重要的数据存储设备,其技术革新一直备受关注。近年来,“叠瓦式硬盘”(Shingled Magnetic Recording,简称SMR)逐渐进入了大众的视野。那么,究竟什么是叠瓦式硬盘?它又有哪些特点和优劣势呢?今天
为什么过度思考会让人痛苦
荷兰拉德堡德大学的一项研究揭示了关于思考的一个深刻见解:思考,这一看似高尚的脑力劳动,实际上在许多情况下与不愉快的感觉紧密相连。这项研究成果被权威期刊《心理学公报》所发表,进一步巩固了其科学性和影响力。通过详尽地分析2019年至2020年间