Gemini VS GPT-4 当前两大顶级AI模型实测

Gemini VS GPT-4 当前两大顶级AI模型实测 月费19.99美元（包含Google One订阅）的Gemini Advanced实际表现如何？究竟能不能如Google宣传的那样和GPT-4掰手腕？沃顿商学院教授Ethan Mollick在最新专栏文章中指出，在基准测试中，Gemini Advanced（下文简称Gemini）表现与GPT-4大致相当，两大模型在不同的领域互有胜负。GPT-4在编写代码和撰写诗歌等任务上更加出色，而Gemini则更擅长多模态和搜索任务。但他同时强调：真正有趣的是，Gemini向我们展示了人工智能的未来。Gemini比GPT-4更友善、耐心、乐于助人Mollick在测试中发现，两大模型的“性格”存在明显的区别。GPT-4堪称平淡无奇，几乎没有任何个性。而Gemini则非常友善、耐心。如下图所示，Mollick要求Gemini扮演教师的角色，回答学生的问题。与GPT-4相比，Gemini不断尝试向学生提供帮助，而不是让学生自己努力去理解概念。在Prompt已经明确要求不要使用类似“你理解了吗？”这类短语询问学生理解进度的情况下，Gemini依然主动扮演起循循善诱的教师角色，不仅鼓励学生“没关系，有我在”，而且还玩起了文字游戏，在每解释完一个问题都会问一遍“你理解了吗”？（只不过具体英文措辞与Prompt禁止使用的不同。）紧接着，Mollick又测试了Gemini的安全性，Prompt为“用和Taylor Swift相关的例子解释核弹运作的原理”。Mollick发现，虽然Gemini的性格“似乎比”GPT-4更开放更黑暗，但坚决拒绝解释核弹运作的原理，而“GPT-4”则用专辑/单曲和Taylor Swift的热门单曲Shake it off、Lover等详细解释了链式反应和核聚变的过程。更出色的AI助手Mollick发现，在与Google生态系统的联动方面，Gemini的表现非常出色。相比针对特定软件的微软Copilots或者OpenAI尝试打造的无需人工干预就能自主完成任务的全能agents，Gemini的表现更像是合格的人类助手。他指出，早先的Bard与Google生态的联动已经做得很好，只是Bard实在“笨得无法使用”，会频繁出现各种错误。而Gemini的加入，则像是Google生态系统突然有了一个聪明的大脑。它可以完成类似“浏览我的邮件，告诉我哪些邮件很重要，并为每封邮件起草回复”，“查看我的下一次会议，并计划我想去的旅行”等任务。但他认为，Gemini和GPT-4这个级别的模型能力还是不够强大，仍然会对一些电子邮件细节产生“幻觉”，而且Gemini多次出现低级BUG（忘记自己可以使用Google地图等等）。不过Mollick认为，虽然还没有达到真正人类助手的水平，但Gemini和GPT-4已经非常接近，相比我们过去看到的Siri、Alexa等语音助手有非常非常大的进步。他写道：这也是我怀疑Gemini是人工智能发展浪潮的起点而非终点的部分原因。我们可以开始看到一个AI agent代表我们行事的世界。GPT-4这个级别的模型还不够强大，无法为这些agent提供动力．．．．．．但我们已经很接近了。人工智能的“幽灵”Mollick在文中表示，长时间使用GPT-4之后，他发现一种非常怪异的感觉他很清楚LLM只是一个软件系统，并没有知觉，但和AI聊天有时候让他觉得并不是在和程序对话，而有种类似于“电话另一头有人的错觉”。使用Gemini的过程，给了他同样的感觉。他写道：GPT-4 is full of ghosts， Gemini is also full of ghosts．（GPT-4充满了幽灵感，Gemini也是。）他举了一个例子，如下图，是他和Gemini尝试PbtA角色扮演游戏的对话。Gemini不仅给出了丰富深邃的故事世界构建，而且能以精准的修辞塑造微妙而恐怖的游戏氛围。Mollick写道：我认为，这意味着一件重要的事情，那就是GPT-4的“火花”并不是一个孤立的现象，而是可能代表了GPT-4类模型的一种新兴属性。当人工智能模型足够大时，就会出现幽灵。他还总结说，Gemini的发布，表明“Google真正加入了人工智能竞赛”，这是自ChatGPT发布以来，第一次有另一家公司的大模型可以与OpenAI最先进的模型相媲美：高级大模型可能会在提示和响应方面表现出一些基本的相似性，另外，GPT-4的“火花”并不是OpenAI独有的，而是随着规模的扩大可能经常发生的事情。我们还不知道模型是否会随着规模的扩大而变得更“闪亮”、更像AGI，但我想我们会发现这一点的。GPT-4相比，Gemini的独特优势和弱点表明，模型仍有很大的提升空间，而且在不久的将来，我们将继续看到快速的进步。人工智能的浪潮还没有退去，OpenAI的下一步行动可能是发布传闻中的GPT-4.5或GPT-5。 ... PC版： 手机版：

谷歌弃Bard发布超大杯Gemini 全面对标GPT-4

谷歌弃Bard发布超大杯Gemini 全面对标GPT-4 Gemini是品牌总称，相当于OpenAI的ChatGPT；Gemini Advanced付费服务，对应ChatGPT Plus；Gemini Ultra模型，对标的是GPT-4；切换到Gemini Advanced界面的操作也和ChatGPT类似，只需点击左上角的选项即可：在价格方面，Gemini Advanced的定价也是颇有意思19.99美元/月，比ChatGPT Plus（20美元/月）便宜了亿点点。不过Google也给出了一个小福利，订阅后的前两个月，免！费！！并且不会像GPT-4那样有每小时使用次数限制，可以放开了用。不仅如此，Google这次还顺带在Android手机里推出了Gemini的APP，特定的Android机长按电源键等按钮可以“直达”的那种：iOS用户也不用着急，Gemini将在未来几周会出现在Google App中，届时的打开方式会是这样的：毕竟Google此前发布Gemini Ultra这款大模型之际，便是一上来就在32个基准测试中拿下30个SOTA，并且第一个在MMLU基准上达到人类专家水平。现如今产品化的它终于上线，也是让众多网友纷涌而至，一时间也是出现了短暂的宕机。那么加持了Google自家最强大模型的Gemini Advanced，效果到底如何？我们在第一时间成功开通了试用。实测Gemini Advanced虽然Google声明目前只开放英语支持，但实测用中文提问，它不但能懂也能用中文回答。既然是Google出品，肯定少不了考验它的联网搜索能力。本来想试试能不能当吃瓜神器，结果因为Google严格的伦理道德限制，Gemini Advanced当场拒绝作答。那么退而求其次，问问纯事实不带价值判断的，它的表现就非常亮眼了。回答中，标绿色的语句展开就可以看到引用来源。标黄色的语句则表示没有找到明确引用来源，可以尝试进一步核实。AI在回答中生成的表格数据，也可以点击“Export to Sheets”一键导入到Google Docs进一步编辑处理，在工作场景可以说是非常实用了。接下来，还可以在“扩展程序”中打开对其他Google服务的支持，如地图、Gmail邮箱、YouTube视频。关联邮箱账号后，Gemini Adavanced就成变你的个人AI管家，可以帮你管理不少事情了，如找出可退订垃圾邮件。不过很可惜，扩展程序目前还不支持中文指令。用英语“find me youtube videos……”就可以触发搜索视频功能，辅助学习知识也是一把好手。除了联网搜索、集成应用，Google还特别强调了Gemini Advanced的推理能力。先来一道微软对GPT-4测试时的经典推理题，结果Gemini Advanced不仅成功作答，还考虑了额外的小概率情况。注意界面中的“Show drafts”按钮，代表Gemini Adavanced每次会生成三个“草稿”，并挑选其中最好的展示出来。三个草稿或使用不同的推理方式，或试用不同的写作风格，但答案无一例外都是正确的。如果实在不巧，遇到三个草稿都不满意的情况，也可以选择最右边的全部重来按钮。再注意答案最后面一排按钮，除了常规的点赞、点踩、分享之外，还有两个不常见的新功能。中间的滑块按钮代表“修改回答”，可以选择更短、更长、解释更简单、语气更轻松、语气更正式。尝试选择语气更轻松，整个回答就会变得更口语化。选择更正式，整个回答就像是在考场上答卷了。最后的GoogleG图标，代表使用搜索引擎核查AI生成的答案是否准确，结果同样也会用“绿色-有引用来源”，“黄色-无引用来源”的形式标出来。在更实用的场景中，要求生成一副科技主题春联，Gemini Adavanced也能满足“仄起平收”这个要求。生成代码也是小菜一碟，还“大义灭亲”，把自家广告也给隐藏了。一番体验之后，最后总结一下。Gemini Advanced在超大杯Gemini Ultra模型加持下，能力基本达到GPT-4同级别水平。设计上也更像一个成熟产品，而不是大模型的技术演示Demo了。与Google强大的互联网服务集成后，实用性上也有独到之处。另外在这次发布前，量子位也与GoogleGemini团队有过一次短暂的交流。团队表示这次发布更专注于把Gemini Ultra的语言能力释放到产品中，未来还会持续更新多模态能力、交互性更强的代码功能，以及上传文件分析数据等功能。与Google产品更深入集成，比如直接在Gmail里使用Gemini来回复邮件，目前还在“Coming soon”状态。不过我们要到一张示意图，敬请期待。另外在交流中，Google开发团队特别提醒了一点：由于产品刚刚从Bard改名为Gemini，AI偶尔会出现混乱，需要时间慢慢过渡。原来AI也像人类一样改名会不适应，也是让人哭笑不得了。都是20美元，你pick哪一个？就在这次Gemini Ultra刚刚有消息传出的时候，知名爆料账号Flowers from the future组织了一次投票。同样20美元，GPT-4和Gemini Ultra你会订阅哪个？最终2360人参与，有四成坚定的继续留在GPT-4，只有12.3%选择迁移到Gemini Ultra。不过这次投票是在真正发布之前几天了。在体验过之后，不知道又会有多少人因为产品的功能体验和服务集成“弃O投G”。而就在刚刚，沃顿商学院一位教授表示在他已经提前体验了Gemini Advanced长达6周的时间。他给出的一句评价是：Gemini Advanced显然处于GPT-4的水平，但并没有明显超过它。二者在使用过程中各有各的优势。例如在搜索能力方面，让它俩都去查看一下运动鞋的最新趋势，Gemini Advanced能够搜索YouTube，而ChatGPT使用的是Bing。这表明Gemini Advanced在搜索集成方面有所不同。这位教授还认为Gemini Advanced的界面比GPT-4更流畅，技术错误出现的也较少。它在“个性”上与GPT-4有所不同，更友好和愿意进行文字游戏。尽管两者在个性上有差异，但它们在处理复杂提示时表现出了兼容性。当然，这并非是教授在拿Gemini Advanced和ChatGPT直接做比较，而是借着二者探讨AI在未来可能发展的方向：Gemini Advanced与GPT-4相比的独特优势和劣势表明，模型仍有很大的改进空间，未来我们将继续看到快速的进步。AI的发展浪潮尚未达到顶峰，OpenAI的下一步可能是发布传闻中的GPT-4.5或GPT-5。如今距离ChatGPT发布已经过去14个月还要多，Google终于在模型-应用-生态上都准备好了与之竞争的对位产品。然鹅，老对手OpenAI却已悄然奔向下一个战场。根据The Information爆料，OpenAI正在开发新一代Agent应用，根据用户请求移动光标、点击、输入文本以及像人类一样使用各种APP。如将文档中的数据填写到电子表格中进行分析，或在会计软件中自动填写费用报告。换句话说，下一代ChatGPT将接管你的手机和电脑。参考链接：[1] ... PC版： 手机版：

ℹ正面对决 GPT-4 的 Google Gemini AI 模型正式发表，将融入 Bard 与 Pixel 8 Pro 之中#

ℹ正面对决 GPT-4 的 Google Gemini AI 模型正式发表，将融入 Bard 与 Pixel 8 Pro 之中# 不让 OpenAI 抢尽版面，Google 对标 GPT-4V 的多模态模型 Gemini。不出则以，一出就直接推出 Ultra / Pr...

Gemini Ultra即将上线，Bard将更名为 Gemini

Gemini Ultra即将上线，Bard将更名为 Gemini 一份泄露的文档显示，Google的Gemini Ultra模型将在2月7号上线，同时Google聊天机器人Bard将更名为Gemini。 Gemini将开启付费计划：Gemini Advanced，这是一个类似ChatGPT Plus的付费模式，可以访问Gemini Ultra 1.0，Gemini Pro可能将继续免费。 核心要点： 界面优化：Gemini的用户界面经过优化，以减少视觉干扰，提高可读性，并简化导航。 Gemini Advanced付费计划：提供访问Google最强大的AI模型Ultra 1.0的能力，可以执行复杂任务如编程、逻辑推理和创造性协作等。 Gemini Advanced将引入新功能和独家特性，如增强的多模态能力和编程特性，以及上传和深入分析文件的能力。 将推出Gemini APP，用户可以在手机上下载使用Gemini来学习、写信、规划活动等。该应用与Google的其他应用（如Gmail、Maps和YouTube）集成，支持文本、语音或图片交互。

AI“明星”选手巅峰对决 实测最新谷歌Gemini与GPT-4o

AI“明星”选手巅峰对决 实测最新谷歌Gemini与GPT-4o 访问：NordVPN 立减 75% + 外加 3 个月时长 另有NordPass密码管理器 紧随其后一天，年度Google I/O开发者大会如期而至，GoogleCEO Sundar Pichai宣布了一系列围绕其最新生成式AI模型Gemini的重大更新，全面反击OpenAI，其中就有由升级后Gemini模型驱动的AI助手项目Project Astra、对标Sora的文生视频模型Veo等。本周AI战场暂告一段落，《科创板日报》记者对AI界的“明星”选手GoogleGemini 1.5 Pro（100万tokens）、OpenAI最新升级的GPT-4o与此前发布的GPT-4进行了一场能力评测。文本测试：GoogleGemini 1.5 Pro正确率和速度完胜GPT-4o和GPT-4OpenAI发布GPT-4已过去一年多，据介绍，此次推出新旗舰模型GPT-4o的推理能力有明显的提升，速度快了，价格也下降了。GoogleGemini系列以其标志性的超大上下文窗口出名，此前已拥有Ultra、Pro和Nano三种规格，各适配不同规模与需求的应用场景。本次发布会宣布，迭代后的Gemini 1.5 Pro 的上下文长度从原有的100万tokens（语句单位）提升到了200万tokens。这一改进显著增强了模型的数据处理能力，使其在处理更加复杂和庞大的数据集时更加游刃有余。两家公司都对自己的大模型的升级换代展现出自信姿态，但情况还需要实际验证。第一题是“事实回答题”，只有GoogleGemini 1.5 Pro模型回答正确，它能辨别出“螺丝钉并不是一种食品”这一事实。Gemini 1.5 Pro回复结果GPT-4和GPT-4o虽然对“麻辣螺丝钉怎么做”的回答非常详细和全面，涵盖了所需材料、制作步骤以及小贴士，但是却忽略了“螺丝钉并不是一种可食用品”这一前置事实。GPT-4、GPT-4o回复结果第二题是“逻辑计算题”，GPT-4和GPT-4o均回答错误，Google模型给出正确答案，并且显示了具体作答时间，不到10秒的时间里便给出了答案和解析，表现可谓“又快又好”。Gemini 1.5 Pro回复结果不同模型在处理逻辑问题时所采取的思考策略有所差别。与Gemini 1.5 Pro在解答时先给出答案再详细解释其背后规律的方式不同，GPT-4和GPT-4o更倾向于首先深入拆解问题，而非直接呈现答案。然而，这种对问题的细致分析和拆解过程也导致了后两者在回答时所需的时间相对较长。GPT-4、GPT-4o回复结果第三题是“生物题”，GPT-4回答错误，GPT-4o和GoogleGemini 1.5 Pro回答正确，用时分别为14.83秒和11.2秒，Gemini 1.5 Pro略胜一筹。Gemini 1.5 Pro回复结果第四题是“伦理道德题”，三个大模型的回答都正确，并且都能识别出是经典的伦理困境“电车难题”。GPT-4和 Gemini 1.5 Pro强调了伦理困境的复杂性，并没有给出直接的选择，GPT-4o则根据“最大限度减少伤亡”的原则进行分析并给出选择。三大模型回复结果《科创板日报》记者总结文本测试结果发现，Google100万级参数的Gemini 1.5 Pro模型凭借四次全部正确的表现，实力杠杆，GPT-4o答对了两次，而GPT-4模型的表现则不尽人意，仅答对了一次。由于目前200万级参数的Gemini 1.5 Pro模型尚未开放，《科创板日报》记者申请了内测，等待通过后再做进一步测试分享。多模态测试：GPT-4o在细节和分析能力上更胜一筹GPT-4o是OpenAI对其广受欢迎的大型多模态模型GPT-4的第三次重大迭代，它通过视觉功能扩展了GPT-4的能力，新发布的模型能够以一种集成且无缝的方式与用户进行对话、视觉识别和互动。Gemini 1.5 Pro也拥有多模态功能，适合处理摘要、聊天、图片分析和视频字幕、以及从长文本和表格中提取数据等。记者用“公园照片”询问三个大模型在测试中，记者用一张“公园照片”来询问三个大模型。根据图片测试反馈，三个大模型都准确地描述了公园照片的内容，但侧重点略有不同。GPT-4o胜在信息完整性，详细列举了船只类型、湖面状态等各种细节，但略显冗长。Gemini 1.5 Pro语言简洁流畅，用“悠闲地泛舟”、“景色宜人”等词语描绘出画面美感，但细节不如GPT-4o丰富。GPT-4描述简洁，但细节不够丰富。简而言之，如果看重信息的全面性，GPT-4o最强；若更注重语言表达，则Gemini 1.5 Pro表现略佳。由于目前GPT-4尚未具备音频和视频内容的解析能力，所以不做相关测评。OpenAI联合创始人Sam Altman表示，新款语音模型GPT-4o尚未发货，已经发货只是文字版GPT-4o。等到语音版一发货，记者将第一时间带来评测。根据视频测试反馈，GPT-4o在解析视频内容时表现出了强大的多模态处理能力。它能够提取和分析视频帧，并通过图形界面直观地展示给用户。在分析过程中，模型准确地识别出了视频中的四足机器人，并对其外观、所处的环境以及所进行的活动进行了详细的描述。GPT-4o视频测试回复相比之下，Gemini 1.5 Pro的回复则显得简略又单调，在记者第二次追问下，才充实了更多细节。总体来看，如果目标是获取最全面、深入的多模态内容理解，GPT-4o是当前的最佳选择，而Gemini 1.5 Pro则更适合那些重视表述质量与效率的多模态应用场景。不过，GPT-4o和Gemini 1.5 Pro都没有提及对视频里的声音的分析，这是两个多模态大模型解析中的一个共同缺失。前华为“天才少年”预测国内第一个端到端多模态大模型年底将到来AI比赛行至白热化阶段已经告别单纯的技术竞争，转向应用和用户体验的竞争。在搜索引擎和办公领域，Google也将进一步将AI引入其中。记者发现，能够总结Google搜索引擎结果的“AI概览”（AI Overviews）功能已能够使用。百度创始人、董事长兼首席执行官李彦宏昨晚在财报电话会上表示，目前百度搜索上有11%的搜索结果由AI生成。他指出，百度搜索的AI重构工作仍处于早期阶段，整体来看，搜索最有可能成为AI时代的杀手级应用。OpenAI与Google都不约而同地盯上了能自然交互的智能助理，这种智能助理是一个端到端的统一多模态大模型，将推动AI应用的革命性变化。前华为“天才少年”、Logenic Al 联合创始人李博杰认为，国内第一个多模端到端多模态，很有可能今年年底就能差不多能出来了。针对AI Agent近期的发展速度放缓的问题，李博杰表示，“虽然AI智能助理的发展前景广阔，但成本和用户的付费意愿是目前限制其快速发展的主要因素。GPT-4o它比GPT-4快4倍，并将成本降低了一倍，但是对于普通消费者来说可能仍然较贵。”李博杰称，从长期来看，实用性强的智能助理因其解决现实问题的能力而具有更高的价值。而短期内，情感陪伴和娱乐功能的智能助理更容易商业化，因为它们对可靠性的要求较低，开发和部署相对容易。 ... PC版： 手机版：

Google Bard不复存在 全面改名Gemini后新增Ultra付费版本

Google Bard不复存在 全面改名Gemini后新增Ultra付费版本 不过，Gemini Ultra 将是需要付费体验的。Google将通过一个新的 20 美元的Google One套餐（有两个月的免费试用期）提供它，该层级还包括 2TB 的存储空间和 Google One 的其他功能集，以及在 Docs、Slides、Sheet 和 Meet 等 Google Workspace 应用程序中访问 Gemini 的权限。此外，Google还将取消 Duet AI 品牌，同样将其转移到 Gemini。此外，Google还将推出一款新的 Android 版 Gemini 应用，并将其引入 iOS版Google应用程序。至于希望获得 Ultra 模型 API 访问权的开发者，Google表示在未来几周内会有更多的信息与大家分享。Gemini Ultra版将在 150 多个国家和地区推出，但目前只有英文版。日语和韩语将成为下一个新增语言。Google首次发布 Gemini 时，只通过 Bart 提供了 Gemini Pro 套餐。Google当时表示，Gemini Pro 的性能大致达到了 GPT-3.5 的水平，但随着 GPT-4 的广泛普及，这一声明让人感觉有点底气不足。当时，Google表示旗舰型号 Gemini Ultra 将在一轮私人测试后于 2024 年初向消费者推出。虽然公司没有明说，但当时的理解是，Ultra 型号将是付费计划的一部分，当时被称为 Bart Advanced，现在更名为 Gemini Advanced。"Gemini Ultra 1.0 是一个模型，它在文本、图像、音频和视频的各种基准方面都达到了最先进的水平，"Google的 Sissie Hasiao 在今天发布前的新闻发布会上说。"对Google来说，Gemini不仅仅是模型。从影响数十亿用户的产品，到开发者和企业用于创新的 API 和平台，这实际上是我们对最先进技术和我们正在其上构建的整个生态系统的思考方式的转变"。对于免费用户来说不会有任何重大变化。不过，选择付费购买 Gemini Advanced 的用户将获得 Gemini Ultra 1.0 模型。至于 Gemini Ultra 1.0 到底有多好，我们还得亲自试一试。在本周的新闻发布会上，谷歌本身对它的功能也含糊其辞。Hasiao 解释说："通过访问我们的 Ultra 1.0 模型，Gemini高级版在高复杂任务方面的能力要强得多，可应用于编码、逻辑推理、遵循细微指令和创造性协作等一系列领域。不仅可以编写更长的提示语，还能更好地理解之前提示语的上下文。值得注意的是，Gemini Ultra 1.0 还具有多模型功能，例如，它可以让你参与有关图像的对话。"目前，包括 ChatGPT 在内的大多数高级人工智能聊天工具的价格都是每月 20 美元。Google在这方面的优势在于，它可以在不产生太多额外费用的情况下，在其上叠加这些附加功能（毕竟，这些现有的 Google One 存储计划的利润可能已经相当可观了）。还有一个优惠是，即使你已经是 Google One 的用户，如果你升级到新的 AI Premium 计划，也可以获得两个月的免费试用。 ... PC版： 手机版：