首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

GPT-3.5聊天机器人ChatGPT通过放射学考试

【ITBEAR科技资讯】5月18日消息,加拿大科学家最新的研究成果显示,基于GPT-3.5的ChatGPT,一款由OpenAI开发的人工智能聊天机器人程序,在美国放射学委员会考试中取得了令人满意的成绩。

据ITBEAR科技资讯了解,为了评估ChatGPT在美国放射学委员会考试问题上的表现,并探索其在这一领域的优势和局限性,多伦多大学的研究人员进行了一系列测试。他们使用了150道与加拿大皇家学院和美国放射学委员会考试风格、内容和难度相当的选择题。

研究结果显示,基于GPT-3.5的ChatGPT在这些考试题目中的正确率达到了69%,接近了70%的及格线。在回答低阶思维问题时,该模型表现相对较好,正确率达到了84%。然而,当面对高级思维问题时,它的正确率仅为60%。

与此同时,研究团队还测试了性能更为出色的GPT-4模型。结果显示,GPT-4在整个考试中的正确率达到了81%,在高阶思维问题上的正确率也为81%。值得注意的是,尽管GPT-4在低阶思维问题上的正确率为80%,但与GPT-3.5相比,它错答了12道题,引发了研究团队对GPT-4收集信息可靠性的担忧。

这项研究的结果表明,ChatGPT作为一款基于GPT-3.5的聊天机器人程序,能够在放射学领域的考试中取得一定的成绩。然而,随着模型升级到GPT-4,它在高级思维问题上的表现有了显著的提升,但在低阶思维问题上的准确性有所下降。研究团队对GPT-4的信息收集可靠性提出了一些担忧,这可能需要进一步的研究和改进。

总的来说,ChatGPT的发展和应用将为人工智能领域带来新的可能性,但在特定领域的表现仍然需要进一步的改进和优化。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20230518A01J0I00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券