首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

研究:ChatGPT新闻搜索结果准确性不足 153次回答有89次错误

【太平洋科技快讯】近日,美国哥伦比亚大学Tow数字新闻研究中心发布了一项重要研究,揭示OpenAI的ChatGPT搜索工具在新闻搜索准确性方面存在严重问题。根据研究结果显示,ChatGPT在153次回答中,大部分回答存在完全或部分错误,仅有7次明确表示无法准确回答。具体数据为:错误回答89次,部分正确57次,完全正确仅47次。

哥伦比亚大学的研究人员选取了20家出版商的200条引文作为测试样本,其中40条引文来自禁止OpenAI爬虫抓取的网站。通过这种方法,研究人员对ChatGPT的搜索准确性进行了全面评估。

研究中记录了一些典型错误案例,如ChatGPT将《奥兰多哨兵报》的读者来信错误地归因于《时代周刊》的文章;在另一案例中,ChatGPT在确认海外媒体一篇关于濒危鲸鱼的文章引用时,错误地链接到了一家剽窃该文章的网站。

针对研究结果,OpenAI表示,由于缺乏Tow中心隐藏的测试数据和方法,解决错误归因具有挑战性。OpenAI认为这次研究是对其产品的非典型测试,并表示将继续优化搜索结果,以提高准确性。

今年早些时候,OpenAI与新闻行业进行了广泛合作,包括美联社、阿克塞尔·斯普林格、康泰纳仕等多家知名媒体和出版商。然而,此次研究结果的公布,无疑对这些合作伙伴对ChatGPT搜索工具的信任度产生了一定影响。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/OuQ_z5c_tFc5Kdc8_Q1G2MoQ0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券