欧易

欧易(OKX)

国内用户最喜爱的合约交易所

火币

火币(HTX )

全球知名的比特币交易所

币安

币安(Binance)

全球用户最多的交易所

初步评测:“学霸”GPT-4更准确、专业、幽默,但仍然有缺陷

时间:2023-04-06 09:53:03 | 浏览:48

·新系统在美国41个州和地区的律师资格考试中获得的分数,排名前10%左右。它还可以在SAT考试中获得1300分(满分1600分),在生物、微积分、宏观经济学、心理学、统计学和历史等先修课程高中考试中获得5分(满分5分)。3月14日,Chat

·新系统在美国41个州和地区的律师资格考试中获得的分数,排名前10%左右。它还可以在SAT考试中获得1300分(满分1600分),在生物、微积分、宏观经济学、心理学、统计学和历史等先修课程高中考试中获得5分(满分5分)。

3月14日,ChatGPT的开发机构OpenAI正式发布其里程碑之作GPT-4。据介绍,GPT-4是一个多模态大模型(接受图像和文本输入,生成文本)。相比上一代的GPT-3,GPT-4可以更准确地解决难题,具有更广泛的常识和解决问题的能力:更具创造性和协作性;能够处理超过25000个单词的文本,允许长文内容创建、扩展对话以及文档搜索和分析等用例。

但是,GPT-4仍然有许多正在解决的局限性,例如社会偏见、幻觉和对抗性prompt(提示)。

《纽约时报》汇总了各方面专家第一时间对GPT-4的测试,得出了以下10个结论。(图片内中文为AI翻译)

1. 学会了更加精确

AI专家和风险投资公司Page One Ventures 的合伙人克里斯· 尼科尔森 (Chris Nicholson)告诉GPT-4,他会讲英语,但不懂西班牙语。他要求提供一份可以教他西班牙语基础知识的教学大纲,而机器人提供了一个详细且组织良好的教学大纲。它甚至提供了广泛的学习和记忆西班牙语单词的技巧,尽管并非所有建议都中肯。

尼科尔森向老版本的ChatGPT寻求类似帮助,该版本依赖于GPT-3.5。它也提供了教学大纲,但建议更笼统且帮助不大。

“它已经突破了精确方面的障碍。”尼科尔森说,“包含了更多事实,而且它们往往是正确的。”

2. 提高了准确性

当AI研究员兼职教授奥伦·埃齐奥尼(Oren Etzioni)第一次尝试GPT-4时,他问了一个直截了当的问题:“奥伦·埃齐奥尼和伊莱· 埃齐奥尼 (Eli Etzioni)之间有什么关系?”

老版本的ChatGPT对这个问题的回答一直出错。GPT-4拥有更广泛的知识,但它仍然会出错。虽然答案大部分是准确的,但已于去年8月完成训练的这个机器人并没有意识到,埃齐奥尼博士最近辞去了艾伦研究所的首席执行官一职。

3. 可以用令人印象深刻的细节描述图像

GPT-4具有响应图像和文本的新功能。OpenAI总裁兼联合创始人格雷格·布罗克曼(Greg Brockman)演示了该系统如何细致地描述来自哈勃太空望远镜的图像。

它还可以回答有关图像的问题。如果给出冰箱内部的照片,它可以建议用手头的东西做几顿饭。

OpenAI尚未向公众发布图像识别功能,但一家名为Be My Eyes的公司已经在使用 GPT-4构建服务,可以更详细地了解在互联网上遇到的图像或在现实世界中拍摄的图像。

4. 增加了严肃的专业知识

最近,北卡罗来纳大学教堂山分校的医学副教授兼心脏病专家阿尼尔·盖希(Anil Gehi)向聊天机器人描述了他一天前接待的一位患者的病史,包括患者术后出现的并发症。描述中包含几个外行人无法识别的医学术语。

当盖希医生问它应该如何治疗病人时,聊天机器人给出了完美的答案。 “这正是我们治疗病人的方式。”他说。当他尝试其他场景时,机器人给出了同样令人印象深刻的答案。

这些知识不太可能在每次使用机器人时都显示出来,仍然需要像盖希医生这样的专家来判断它的反应并执行医疗程序,但它可以在许多领域展示这种专业知识,从计算机编程到会计。

5. 可以让部分编辑失业

当提供来自《纽约时报》的文章时,新的聊天机器人几乎每次都能对故事进行精确和准确的总结。如果在摘要中添加一个随机句子并询问机器人摘要是否不准确,它会指向那个被添加的句子。

埃齐奥尼说这是一项了不起的技能。 “要进行高质量的总结和比较,就必须对文本有一定程度的理解,并有能力表达这种理解。”他说, “那是一种高级形式的智力。”

6. 正在培养一种幽默感

埃齐奥尼要求新机器人提供“关于歌手麦当娜的新颖笑话”。这个回答让他印象深刻,也让他笑了。

Material Loan的梗可能来自麦当娜的知名歌曲《Material Girl》。

除了公式化的笑话之外,新的机器人仍然很难写出任何东西。但它比老版本稍微有趣一点。

7. 可以在一定程度上推理

埃齐奥尼给了新机器人一个谜题。

新系统似乎做出了适当的回应。但是答案没有考虑门的高度,这也可能会阻止坦克或汽车通过。老版本的ChatGPT更好地处理了这个问题,因为它认识到高度和宽度很重要。

OpenAI的首席执行官山姆·奥特曼(Sam Altman)表示,新的机器人可以做“一点点”推理。但它的推理能力在许多情况下都会崩溃。

8. 可以通过标准化考试

OpenAI表示,新系统在美国41个州和地区的律师资格考试中获得的分数,排名前10%左右。根据该公司的测试,它还可以在SAT考试中获得1300分(满分1600分),在生物、微积分、宏观经济学、心理学、统计学和历史等先修课程高中考试中获得5分(满分5分)。

而更早的版本未能通过律师资格考试,在大多数大学先修考试中的得分也没有那么高。

9. 不擅长讨论未来

尽管新机器人似乎可以对已经发生的事情进行推理,但当被要求对未来做出假设时,它就不那么熟练了。它似乎借鉴了其他人所说的话,而不是进行新的猜测。

当埃齐奥尼问新机器人,“NLP(自然语言处理)中需要解决的重要问题是什么?未来十年的研究?”它无法提出全新的想法。

10. 它仍然有“幻觉”

新机器人仍在编造东西,这个问题被称为“幻觉(hallucination)”,困扰着所有领先的聊天机器人。因为系统不了解什么是真什么是假,它们可能会生成完全错误的文本。

当被要求提供描述最新癌症研究的网站地址时,它有时会生成不存在的互联网地址。

相关资讯

chatGPT,AI时代到来?一文告诉你到底何为GPT!GPT能做什么!

近期chatGPT异常火爆,仅仅用了60 天用户就直接破亿,这是何等可怕的速度!于是乎国内外大厂纷纷追随 AIGC 步伐, ChatGPT 引领 AI 在科技圈一路“狂飙”!由于涉及到太多的专业词汇,开始之前,先通俗易懂的解释这些词汇(图1

免费可商用开源GPT模型问世,50G权重直接下载,性能不输GPT-3

萧箫 发自 凹非寺量子位 | 公众号 QbitAI真·开源GPT模型,终于来了。参数量级130亿,大小比肩最近Meta开放的LLaMA-13B,但从数据集、模型权重到计算优化训练,全部开源。最关键的是,可商用。没错,虽然就GPT-3而言,之

HuggingGPT:一个ChatGPT控制所有AI模型,自动帮人完成AI任务

丰色 发自 凹非寺量子位 | 公众号 QbitAI最强组合:HuggingFace+ChatGPT ——HuggingGPT,它来了!只要给定一个AI任务,例如“下面这张图片里有什么动物,每种有几只”。它就能帮你自动分析需要哪些AI模型,然

周鸿祎:中国大语言模型和GPT-4差距在两三年,GPT-6后可能会有意识

周鸿祎周鸿祎再次公开谈及自己对人工智能的未来判断。3月25日,2023中国发展高层论坛开幕,三六零(601360.SH,下称“360”)集团创始人周鸿祎以“人工智能与未来安全”为题发表主题演讲。演讲中,周鸿祎展示了AI绘图生成的自画像,以及

震撼!GPT-4来了,支持多模态,全面吊打ChatGPT,完虐标准化考试

智东西编译 | ZeR0编辑 | 漠影智东西3月15日消息,今日凌晨,万众瞩目的大型多模态模型GPT-4正式发布!OpenAI发文称,GPT-4能接受图像和文本输入,输出文本内容,虽然在许多现实场景中的能力不如人类,但在各种专业和学术基准测

华泰证券:从BloombergGPT看金融GPT机遇

2023年3月30日,金融信息提供商彭博社发布了专为金融领域打造的大语言模型(Large Language Model,LLM)Bloomberg GPT。该模型依托彭博社的大量金融数据源,构建了一个3630亿个标签的数据集,支持金融行业内

能赋诗写剧看漫画,但GPT-4“不认识”GPT-4

中新网3月16日电 (中新财经记者 吴涛)北京时间15日凌晨,OpenAI发布大型多模式模型GPT-4。OpenAI称,GPT-4在先进推理上超过了ChatGPT,是OpenAI努力扩展深度学习的最新里程碑。这个“里程碑”到底有哪些特点呢,

GPT-4重磅发布!ChatGPT炸裂大升级,能考上哈佛,体验后我慌了

今天 OpenAI 宣布推出 ChatGPT 4,ChatGPT Plus 用户在今天就能体验到。OpenAI 称它是「最先进的系统,能生产更安全和更有用的回复」。和上一代相比,GPT-4 拥有了更广的知识面和更强的解决问题能力,在创意、视

什么是GPT?为什么说GPT是第三次工业革命?

GPT可以说是2023最热门的话题,没有之一!到底什么是GPT? 为什么说GPT是第三次工业革命?什么是GPT?GPT 是 "Generative Pre-training Transformer" 的缩写,是一种基于Transformer

ChatGPT的“GPT”是什么意思?三个单词暴露你的英语水平!

当我们还活在睡梦中时,人工智能ChatGPT横空问世,从连续回答问题、生成摘要、翻译文档,到信息分类、写代码、编剧本、做作业和写论文,ChatGPT几乎都能应对自如。两个月时间内,ChatGPT的月活用户已突破1亿,成为史上增长最快的消费者

谷歌版ChatGPT公测炸了!比GPT-4数学能力还强,体验名额发得很快

谷歌吃了大亏之后,这次一声不吭,放了大招:对标ChatGPT的Bard测试版,刚刚正式对外发布。而且这次用户在申请候补名单之后,无需经历漫长的等待时间。没错,量子位也已经拿到了测试资格!(中间只有不到5小时的间隔。)实测之后表示,Bard效

更强大恐怖的GPT-4来了,考试表现优于人类,性能远超ChatGPT

界面新闻记者|李京亚3月15日凌晨2点,OpenAI正式发布了升级后的GPT-4。GPT-4是一个多模态大模型,可以接受文本和图像形式的输入,能使用文本解析并回应这些查询。在ChatGPT Plus上,开发人员可以通过API构建应用程序和

ChatGPT:关于OpenAI的GPT-4工具你需要知道的一切

#头条创作挑战赛#OpenAI 已迅速成为科技界最知名的公司之一。这家人工智能 (AI) 公司制作了逼真的图像生成器、3D 模型创建器,以及现在最著名的 ChatGPT。ChatGPT 有能力通过法律考试、撰写整篇长篇文章,甚至编写完整的网

生命科学迎“ChatGPT时刻”!AIGP平台三大功能加速蛋白质生成,6月起向专业公众开放

智东西作者 | ZeR0编辑 | 漠影ChatGPT这把火,已经烧到了生命科学界。智东西3月30日报道,近日,百度创始人李彦宏牵头创立的生命科学平台公司百图生科,正式对外发布其“生命科学版ChatGPT”——由生命科学大模型驱动的AI生成蛋

初步评测:“学霸”GPT-4更准确、专业、幽默,但仍然有缺陷

·新系统在美国41个州和地区的律师资格考试中获得的分数,排名前10%左右。它还可以在SAT考试中获得1300分(满分1600分),在生物、微积分、宏观经济学、心理学、统计学和历史等先修课程高中考试中获得5分(满分5分)。3月14日,Chat

友情链接

网址导航 SEO域名抢注宝宝起名网妈妈知道币圈钓鱼场资讯网中草药材网保罗沃克影迷网宠物猫品种网崆峒山旅游攻略蘑菇街女装资讯网杨幂影迷网张艺凡歌迷网豆粕期货行情网电子烟品牌排名网宁德时代A股电饭煲品牌网甘蔗种植网悬空寺旅游攻略网站开发快速建站
ChatGPT中文网-ChatGPT是人工智能技术驱动的自然语言处理工具,它能够通过理解和学习人类的语言来进行对话,还能根据聊天的上下文进行互动,真正像人类一样来聊天交流,甚至能完成撰写邮件、视频脚本、文案、翻译、代码,写论文等任务。国内文心一言免费最新版、华为盘古中国免费网页版、ChatGPT国内镜像网站、ChatGPT国内中文版网站、免费文心一言在线官网、华为盘古国内版入口体验网站。
ChatGPT中文网 gptpx.cn ©2022-2028版权所有