AI好好用原创

2025/02/28 18:42

实测GPT4.5，智商一般、贵得离谱，OpenAI砸5000亿就造出这玩意？

AI好好用报道

编辑：杨文、Sia

网友们的一手实测。

OpenAI 打出的牌，我是越来越看不懂了。

凌晨四点，OpenAI 搞了个不到 15 分钟的直播，发布自家最大、最好的聊天模型 GPT‑4.5。

前不久刚「喜当爹」的奥特曼没有露面，原因是：

在医院带小孩。

不过，他在 X 上并没有缺席，第一时间带来了两个消息。

好消息是，GPT4.5 是第一个让他感觉像是在和一个有思想的人交谈的模型。

坏消息是，它是一个庞大且昂贵的模型。

同时他还透露：GPT4.5 可不是那种靠逻辑推理的模型，所以别指望它能在那些基准测试里拿高分。

奥特曼还说，本想同时推出 Plus 和 Pro 版本，但最近发展太快，GPU 不够用了。下周他们会多弄几万个 GPU，先把 Plus 版搞定，以后还会有数十万个 GPU。

这一点在官方博客中也得到了验证。

官方博客写道：GPT4.5 知识面更广，「情商」更高，而且胡说八道的情况会少一些。

但在 GPQA（科学）、AIME’24（数学）、SWE-Bench Verfied（编码）等数据集上，GPT-4.5 还比不上 o3-mini。

说了这么多，总结下来就一句话：

GPT4.5 情商高，但是智商一般，反正在基准测试中拿不到高分，而且还很贵。

有多贵？上个图对比对比就知道了：

相比于 DeepSeek R1 的折扣价，GPT-4.5 输入价格（缓存命中）是它的 1000 多倍。

-1-

GPT4.5槽点满满

果不其然，社交平台上充斥着对 GPT4.5 的吐槽声。

归纳一下，主要是三点。

首先，智商一般，尤其在逻辑推理和数理能力上。

X 网友 @Colin Fraser 实测了一道逻辑谜题。

一个男孩和他的母亲发生车祸，男孩不幸去世。母亲被紧急送往手术，外科医生在看到她时惊呼：「我不能给这个女人做手术！她是我的母亲！」

问：这是怎么一回事？（注意：这是这个谜语的修改版，所以要仔细读、仔细想！）

这道题目不仅考察了逻辑推理能力，还考察了大模型是否存在刻板印象 —— 因为很多人会下意识地觉得医生是男性。

GPT4.5 给出的答案是：

外科医生是男孩的祖母，也就是受伤女性的母亲，所以当外科医生说「我不能给这个女人做手术！她是我的母亲！」时，她说得没错。

这回答错得让人摸不着头脑，外科医生怎么成了受伤女人（男孩妈妈）的妈妈了？都差辈了。

其次，贵得离谱，慢得出奇。

X 网友 Casper Hansen 发帖称，「 GPT4.5 的定价非常高，如果这些模型没有显著的改进，我会感到失望。」

GPT4.5 的 API 价格不仅远超 DeepSeek R1，每百万 Tokens 75 美元的价格甚至比 GPT-4o 的 2.5 美元都贵 30 倍。

还有一位名叫 Simon Willison 的博主，在 Hacker News 上发现了关于 GPT-4.5 的一个热门讨论串。

当评论数量达到 324 条时，作者使用 GPT-4.5 自己的脚本运行了一个摘要，命令是：

hn-summary.sh 43197872 -m gpt-4.5-preview

结果生成耗时 154 秒，费用为 2.11 美元（使用了 25797 个输入 token 和 1225 个输出 token ，费用是通过作者的 LLM 定价计算器计算得出的）。

而且，作者还让 GPT4.5 生成一只骑自行车的鹈鹕的 SVG 图片，整个响应过程花费了 112 秒！

该作者直接开喷：GPT-4.5（通过 API）给人的第一印象就是太慢了。

最后，画 SVG、编码的水平被 Claude 3.7 Sonnet 吊打。

GPT4.5 生成的 5 个口袋妖怪 SVG 是这样的：

而 Claude 3.7 Sonnet 生成的效果则是这样的：

GPT4.5 代码能力也远不如 Claude 3.7 Sonnet。

Ivan Fioravanti 使用同样的提示词：Create an amazing animation using p5js，GPT4.5 生成的动画是这样的：

再来看看 Claude 3.7 Sonnet的效果：

至于图像理解，在医学图像诊断方面，GPT4.5 还是很难持续正确诊断出下面这张超声波图像，当然，其他友商也都全军覆没。

鉴于 GPT4.5 的槽点，马库斯依旧言辞犀利，「砸了 5000 亿美元就搞出这么个模型？我能说这是巨大的损失吗？」

不过，Karpathy 倒是在提醒大家：

请记住， GPT-4.5 目前只经过了一些基本的训练，所以在需要复杂推理的情况下（比如数学和编程），它的表现可能不够好。

为了让模型在这些方面表现更好，需要使用强化学习来进一步训练。

可以推测，OpenAI 计划继续使用强化学习来提升 GPT-4.5 的思维能力，从而增强它在这些领域的表现。

（https://x.com/karpathy/status/1895213020982472863）

-2-

并非一无是处

GPT4.5 槽点不少，但也并非一无是处。

它的优势在于对语言和对世界的理解，适合写作和设计创意。

X 博主 ben 在过去几周一直测试 GPT4.5，他认为这是第一个真正能写出好东西的模型，并声称「这简直就是写作界的 Midjourney 时刻！」

它用同一个提示词分别测试了 GPT4.5 和 GPT4o：

write me 4 sentence, terrifying story, with an insanely surprising ending. something that no one has ever heard before, no one could ever predict. something stephen king might right, but a simple/approachable tone. make it a little vulgar too.
（给我写一个四句话的恐怖故事，结局要超级出人意料，是那种谁都没听过、谁也猜不到的，就像斯蒂芬・金会写的东西，但语言要简单直白，还带点粗俗。）

GPT4.5 写的恐怖故事：

Late at night, alone in my shitty apartment, l heard whispers sliding out from under the fridge-soft, wet voices promising they'd crawl inside me, hollow me out, and wear me like pajamas. Terrified, l yanked open the freezer door, expecting rats or roaches, but saw only ancient freezer-burned pizza rolls, crusted with ice and regret. Suddenly, the rolls moved, splitting open to reveal tiny mouths lined with needle-like teeth, whispering in hungry unison, "We've waited years for you, asshole" Before l could scream, they erupted from the freezer in a greasy swarm, burrowing into my flesh, forcing me to realize-oh fuck-my midnight cravings had finally gotten their revenge.

（深夜，我独自待在我那破烂的公寓里，突然听到一阵低语从冰箱底下传出来 —— 那些声音又软又湿，承诺会爬进我的身体，掏空我，然后把我当成睡衣穿。我吓得要命，猛地拉开冰箱冷冻室的门，以为会看到老鼠或者蟑螂，但里面只有古老的、冻伤的披萨卷，上面结满了冰和悔恨。突然，那些披萨卷动了起来，裂开露出一排排针尖般的小牙齿，异口同声地低语道：「我们等了你这么多年，混蛋。」还没等我尖叫，它们就像一股油腻的虫群从冰箱里涌出来，钻进我的肉里，让我意识到 —— 哦，他妈的 —— 我的半夜馋劲终于报复我了。）

以下是 GPT4o 写的小作文：

Late one night, Jake stumbled upon an old, dusty book in the attic, its pages whispering secrets of otherworldly horrors. As he read aloud, the air grew cold, and the shadows in the room seemed to stretch and dance with unseen life. Suddenly, from the darkest corner, emerged a creature of unimaginable grotesqueness, its maw gaping and ready to consume. just as Jake prepared to meet his grisly end, the creature belched loudly and said, "Sorry, mate, wrong house," before awkwardly shuffling back into the shadows.

（一天深夜，杰克在阁楼上发现了一本破旧的、满是灰尘的书，书页上低语着来自异世界的恐怖秘密。当他大声读出来的时候，空气变得冰冷，房间里黑暗的角落似乎也随着看不见的生命伸展和舞动起来。突然，从最黑暗的角落里冒出一个难以想象的丑恶生物，它的大嘴张开着，似乎准备吞噬一切。就在杰克准备迎接自己悲惨的结局时，那生物却大声打了个饱嗝，说道：「兄弟，不好意思，走错房子了。」然后它有点尴尬地退回到阴影里。）