4.5
GPT4.5实测:能力平平,价格却是DeepSeek的280倍
2025年2月28日,今天凌晨4点我蹲了OpenAI的GPT4.5专场直播,天亮后又第一时间拿资格实测了一圈——能力没给什么惊喜,价格倒是把我看傻了:每百万输入75刀。
凌晨4点,OpenAI的GPT4.5专场直播终于姗姗来迟。整个行业对它的期待不用我多说,毕竟这曾经就是整个行业的天。2023年3月15日,GPT4发布,要多惊艳有多惊艳,那时候所有人都是统一的一句话:卧槽,太强了。然后从2023年年末开始,整个行业都在预期下一代GPT模型要在2024年年初发布,结果等了整整一年,多模态4o来了,全新的推理模型o1来了,可下一代GPT基座模型却迟迟没有身影。而今天,将近隔了整整两年的时间,它来了。
在发布的规格上,也是着实有点惨淡,甚至连奥特曼都没来,更没有GPT4和GPT4o那种秀上天的演示,只有跟去年十二天专场直播一样,一个朴实无华的小房间。突然想起当年GPT4刚发布时,布罗克曼那段惊艳的多模态实机演示,给我带来了真的不小的震撼:在本子上画了一个网站的草稿,拍照给了GPT-4,然后前端界面就做好了,还带着HTML的代码。那时候看,真的好惊艳啊。时间一晃,也真的两年了。
回到今晚发布的GPT4.5,按惯例,先看看参数数据。看着好像都比4o强一些,但我发现一个很诡异的事情:AIME 2024那个基准我测过kimi1.5、智谱的zero等等,所以记得比较熟。在这个评测里,几个模型的得分分别为:GPT4.5是36.7%,GPT4o是9.3%,o3-mini(high)是87.3%。记住这几个数据。o3-mini(high)的数据没问题,跟之前发布o3-mini的时候得分一致;但在o1发布的时候,我明明记得对比里4o在AIME2024上的得分是13.4啊。怎么今天发了个GPT4.5,GPT4o的评分还能掉4个点的,这也太抽象了。
然后是他们引以为豪的世界知识,第一个是准确度,第二个是幻觉率,有一说一,这块确实不错,至少是OpenAI家最准的模型了。他们自己列了一个还算比较好玩的题,让GPT-1到GPT-4.5全都答了一遍,这个世纪问题是:人类的第一种语言是什么?GPT-1的答案非常抽象;GPT-2和GPT-3.5稍微好点,但也就那样;到了GPT-4会好点,但不多;而GPT4.5,终于会诚实地告诉你,我不知道了,这是一个未解之谜。
至于代码这块,本身也不是推理模型,所以也没指望特别强。不过根据三方的基准测试,纯能力上看着还行,打不过Claude 3.7 Sonnet也正常,再怎么说那也是Claude。X上有大佬也测了那个经典的物理小球case,效果挺不错。
但是有一点不得不提:抛开成本谈能力,那就是耍流氓。GPT-4.5的价格,我第一次看到的时候,以为我眼睛出问题了:每百万输入75刀,每百万输出150刀。哥,Claude 3.7百万输入才3美刀,百万输出才15美刀,输入比别人贵25倍,输出比别人贵10倍。你凭啥啊?谁给你的勇气啊?我都不想拿DeepSeek跟你比,都是非推理模型,DeepSeek v3的价格你知道多少吗?人家百万输入人民币2块钱,相当于0.27美刀,输出是8块钱,相当于1.1美刀。GPT4.5的输入是DeepSeek v3的280倍,输出是150倍。不是,我真的不理解啊,OpenAI到底凭啥。服了。
目前,GPT-4.5已经对200刀的Pro会员开放,预计这几天就对Plus和Team用户开放。我自然也是第一时间拿到了GPT-4.5的体验资格:目前识图、搜索、画布啥的都支持,但是4o的语音、视频、共享屏幕啥的都没有,算是个退步。而且有BUG,就是在问一些史实性的问题的时候,我明明没开搜索,它非要强制开搜索去回答,就非常的离谱。
相比于4o,他们所说的情商能力,确实有了一些进步。比如这个问题:朋友总是爽约,我想发短信表达愤怒但又不想绝交,我该怎么回复他。如果是4o的回答,就会很der比,一股子没脑子没情商的人机味;GPT-4.5在这方面就好得多。然后我又问了一个小小的逻辑问题,GPT-4o能理解,GPT-4.5直接懵逼了,一直在理解情绪,这情商高得把智商干没了?我roll了5次,没一次对的,这事也是挺抽象的。
然后就是写作能力了。我自己测了几个常用的写作故事case,感觉好像也不是那么尽人意,而且超级慢,慢得我想吐,感觉回到了GPT-4的年代,一个字一个字地往外蹦跶。我都不想跟Claude 3.7、Grok3还有R1比,真的觉得还不如前段时间迭代后的GPT4o写得好,真的稀碎。
坦率地讲,对OpenAI期待有多大,失望就有多大。就现在的状况,我觉得你永远可以相信DeepSeek,但是永远可以对OpenAI保持低预期。疲态尽显。奥特曼也说,这是他们最后一个基座模型了,未来GPT-5是整合了o3的模型,也是混合模型。希望下次还能看到OpenAI觉醒,或者……AI就是一段漫长的长跑,你但凡慢一点,或者停下,身边的竞争者就会呼啸而过。要真有实力和诚意,用户自然买单;要是只会营销和摆谱,必定会被淘汰。这,就是AI圈的生存法则。
祝好吧。今晚就先记到这儿。