前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >GPT最佳实践:基于GPT-4V(ision)解决信任问题(一)

GPT最佳实践:基于GPT-4V(ision)解决信任问题(一)

原创
作者头像
成江东
发布2023-10-11 19:24:05
5280
发布2023-10-11 19:24:05
举报

导语:GPT最大的问题就是它的回答可能是正确的,也可能是错误的,我们在无法分辨时就不能相信它说的话。本系统文章基于最新的GPT-4V版本,给出一些解决方案,让答案可信,从而让GPT可以真正的被用起来。

1 GPT-4V模式介绍

可以看到,GPT-4V目前支持5种模式。

图片
图片

1.1 default(默认模式)

默认模式支持普通对话:

图片
图片

还可以上传图片,基于图片回答问题:

图片
图片

上传图片可以点击图片按纽,或者直接截图后在输入框ctrl+v黏贴:

图片
图片

根据上传图片可以正确识别菜名:

图片
图片

1.2 Browse with Bing(Beta) (Bing浏览器模式)

浏览器模式可以借助网页浏览获取最新的新闻和数据,比如刚刚闭幕的杭州亚运会的数据:

图片
图片

红框处有3个链接,分别是3个新闻来源,点击“1”,可以看到是腾讯网的新闻。

图片
图片

1.3 Advanced Data Analysis(Beta)(高级数据分析模式)

其实就是原来的代码解释器模式,可以自动编程来解决问题:

图片
图片

点击红框处箭头可以看代码:

图片
图片

1.4 Plugins(beta)(插件模式)

插件模式相当于手机里面的第三方APP,由第三方开发,OpenAI审核后上架,支持各种功能如PDF文件对话、生成图表、生成PPT等。

图片
图片
图片
图片

在没有开放浏览器模式的时候,使用WebPilot插件,可以通过查询网页来回答问题,顺便说下,这个插件是国人开发的。

图片
图片

1.5 DALL.E 3(Beta)(绘图模式)

绘图模式可以根据自然语言生成图片。

图片
图片

2 解决信任问题

GPT最大的问题就是它的回答可能是正确的,也可能是错误的,在无法分辨时就不能相信它说的话。那么如何来解决这个问题,真正让GPT的回答能用起来呢?下面分类进行分析:

2.1 启发、创意、开放性问题

这类问题没有标准答案,只需要让GPT列出尽可能多的idea就可以了,然后人类进行选择加工:

图片
图片

2.2 翻译

GPT4的翻译水平超越Google翻译,而且翻译的文字通过阅读也可以初步分辨其质量,所以翻译任务可以直接交给GPT:

图片
图片

而且GPT可以支持多种语言:

图片
图片

2.3 答案可以直接验证

比如这道数学题,直接问GPT4,很容易发现答案是错的:

图片
图片

不要紧,我们用高级数据分析模式,可以看到5*(5-1/5)正是我们要的答案:

图片
图片

操作类的可以直接复制代码进行验证:

图片
图片

2.4 数学问题

数学问题不要用默认模式,一定要用高级数据分析模式,使用程序来生成回答。下面的回答就是错误的,但一眼看不出来。

图片
图片

使用python程序算出来的答案正确:

图片
图片

注意遇到下面的情况,可以点击"Regenerate“按纽重新生成答案:

图片
图片

对于数学问题,还有一个选择,就是使用插件模式的Wolfram插件:

图片
图片

怎么知道这个答案是正确的呢?我们可以让GPT给出分析:

图片
图片

2.5 重复性工作问题

使用浏览器模式得到可信数据:

图片
图片

根据上面的数据,生成数据库insert语句,如果要人工处理,需要写代码,或者手工复制粘贴多次,用GPT一次搞定:

图片
图片

公众号文章:

1. 站在大时代的边上:ChatGPT使用姿势大全

2.一文搞懂chatGPT与New Bing的本质区别

3.星星之火,可以燎原:微软154页GPT-4测试报告精华版

4.人人能看懂的图解GPT原理说明系列(一):神经网络基础知识

5.GPT的三类插件全面介绍

6.使用开源大语言模型私有化部署打造数据库专家系统

7.追平GPT3.5!5道推理题测试国产大模型与GPT差距

8.GPT最强形态:代码解释器(Code Interpreter)测试(一)

更多一手体验文章请关注公众号“强人工智能之路”,可永久免费对话GPT3.5,关注后回复“AI”可以领取精心整理的AI知识图谱一份。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1 GPT-4V模式介绍
    • 1.1 default(默认模式)
      • 1.2 Browse with Bing(Beta) (Bing浏览器模式)
        • 1.3 Advanced Data Analysis(Beta)(高级数据分析模式)
          • 1.4 Plugins(beta)(插件模式)
            • 1.5 DALL.E 3(Beta)(绘图模式)
            • 2 解决信任问题
              • 2.1 启发、创意、开放性问题
                • 2.2 翻译
                  • 2.3 答案可以直接验证
                    • 2.4 数学问题
                      • 2.5 重复性工作问题
                      相关产品与服务
                      灰盒安全测试
                      腾讯知识图谱(Tencent Knowledge Graph,TKG)是一个集成图数据库、图计算引擎和图可视化分析的一站式平台。支持抽取和融合异构数据,支持千亿级节点关系的存储和计算,支持规则匹配、机器学习、图嵌入等图数据挖掘算法,拥有丰富的图数据渲染和展现的可视化方案。
                      领券
                      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档