《纽约时报》封杀OpenAI的网络爬虫
《纽约时报》屏蔽了OpenAI的网络爬虫，其robots.txt页面控制着为索引互联网而构建的自动化机器人的外观，现在明确禁止OpenAI的 GPTBot。这意味着 OpenAI 无法使用该出版物的内容来训练其人工智能模型。根据互联网档案馆的Wayback Machine，《纽约时报》似乎早在8月17日就阻止了该爬虫。
- 发表于:
- 原文链接：https://page.om.qq.com/page/OA9BvNQs2eTPN52Bv4M0gNGA0
- 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号（企鹅号）传播渠道之一，根据《腾讯内容开放平台服务协议》转载发布内容。
- 如有侵权，请联系 cloudcommunity@tencent.com 删除。
相关快讯
扫码
添加站长 进交流群
领取专属 10元无门槛券
私享最新 技术干货
腾讯云开发者
