首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

24 小时抓取百万次,Anthropic AI 公司被指过度抓取网站数据

IT之家 7 月 31 日消息,金融时报(FT)发布博文,指出 AI 公司 Anthropic 虽然声称“要负责任地开发 AI”,但通过 ClaudeBot 机器人过度抓取网站数据,用于训练 Claude 大语言模型。

尽管使用网络爬虫抓取数据是人工智能行业普遍做法,但 Anthropic 因其激进程度而受到批评。

自由职业者网站 Freelancer 也表示,ClaudeBot 在四小时内访问了 350 万次,被迫对其进行屏蔽。批评者指出,Anthropic 无视网站的 robots.txt 协议,强行获取数据,与其宣称的“负责任的 AI”理念相悖。

维修团队 iFixit 首席执行官 Kyle Wiens 于 7 月 24 日发布推文,IT之家翻译如下:

@AnthropicAI,我知道你渴望获取数据,且 Claude 模型也非常聪明,但真的有必要 24 小时内访问我们的服务器 100 万次吗?

这些流量没有向我们付费,且占用了我们开发资源,这真的不太厚道。

我们的服务条款中已经明确禁止通过这种方式使用我们的内容,但你悄悄 @AnthropicAI 是怎么做的。

如果 @AnthropicAI 想要就我们内容的商业使用许可进行交流,我们愿意沟通。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/OzYECcWxPqMmP5fuOID9fiMg0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券