前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >独步AI领域:免费Claude 2登场,引领代码、数学、推理革命,10万token!

独步AI领域:免费Claude 2登场,引领代码、数学、推理革命,10万token!

作者头像
后端云
发布2023-09-01 09:56:25
6080
发布2023-09-01 09:56:25
举报
文章被收录于专栏:后端云后端云

Claude 2 昨天正式发布,并且任何人可以登陆官网直接免费使用。废话不多说,直接上官方网址:https://claude.ai/chats

本篇是有关 Claude 2 和claude以及GPT-4的对比。

Claude 2使用2023年初的新数据训练模型

目前ChatGPT训练的数据截至2021年,Claude 2使用2023年初的新数据训练模型,这一点是相比ChatGPT的一个非常大的优势。

代码、数学和推理全方位大升级

在Codex HumanEval(Python函数合成)、GSM8k(小学数学问题)、MMLU(多学科问答)、QuALITY(非常长的故事问答测试,最多一万个token)、ARC-Challenge(科学问题)、TriviaQA(阅读理解)和RACE-H(高中阅读理解和推理)上,Claude 2的大部分得分都更高了。

在代码、数学和推理方面,Claude 2比起之前的模型都有很大的提升。

在Codex HumanEval的Python代码测试中,Claude 2的得分从56.0%提升到了71.2%。

在GSM8k(大型小学数学问题集)上,Claude 2的得分从85.2%提升到了88.0%。

各类考试的表现

与申请研究生的美国大学生相比,Claude 2在GRE阅读和写作考试中的得分已经超过了90%的考生,并且在定量推理方面,它的表现与申请者的中位数相当。

另外 Claude 2 在美国律师资格考试和美国医师执照考试都有不错的表现。

输入和输出的长度

这次Claude 2的一个大升级,就是输入和输出长度的大幅度增加。

在每个prompt最多可以包含100k的token,这意味着:Claude 2可以一次读取几百页的技术文档,甚至一整本书!

并且,它的输出也更长了。现在,Claude 2可以写长达几千个token的备忘录、信函、故事。

你可以上传PDF之类的文档,然后基于PDF进行对话或者翻译。

更高的安全性能

这个图显示了「红队」提出有害要求或者越狱的情况下,各个模型的有害回答的比例。

Claude 2确实是相当安全可靠。

实测

http://mpvideo.qpic.cn/0bc33yabcaaafyapjuvpn5sfbxwdchpaaeia.f10002.mp4?

上面的视频是将一段比较长的pdf直接翻译成中文,这样就不用之前的方式来翻译pdf文档,之前是通过python编程的方式一步步操作,首先将pdf转文本,然后用python的自然语言库切分文章,保证每段文字不超过1024个字符(不超过chatgpt的最大输入限制),最后将每段的翻译再组合成完整的pdf文档的翻译。参考之前的一篇文章:

用ChatGPT技术来分析和翻译PDF文档,开启新时代的PDF文档处理方式

总结

总之,作者在使用GPT-3.5和claude这几个月的感受就是claude虽然总体回答要比GPT-3.5略差那么一点点,但水平已经很接近了。昨天更新发布了新的Claude 2,基本也是沿袭之前的差距,回答的水平上claude 2要比GPT-4差一点,但不会差太多。但是人家 claude 2 是完全免费的呀,GPT-4每月要付费100多人民币,Claude 2性价比碾压GPT-4,并且免费的claude 2 支持上传100k的文件上传,最多5个文件同时上传。自然语言对话加上多文件大文件的输入可以产生无限多的可能性,Claude 2 完全可以作为自己的AI助理的有力补充。

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2023-07-13,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 后端云 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • Claude 2使用2023年初的新数据训练模型
  • 代码、数学和推理全方位大升级
  • 各类考试的表现
  • 输入和输出的长度
  • 更高的安全性能
  • 实测
  • 总结
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档