2024年7月18日,OpenAI正式发布了其最具性价比的模型——GPT-4o mini。这款模型究竟能做什么?与已上线的GPT-4o相比,又有哪些核心差异?

归纳起来,主要区别体现在以下三个方面:
- 价格更具优势;
- 响应速度更快;
- 性能表现优异(仅略逊于GPT-4o,但相比其他主流模型仍具竞争力)。
更低的价格门槛
根据OpenAI官方公布的输入输出token定价,GPT-4o每百万输入tokens费用为5美元,而GPT-4o mini仅需0.15美元,仅为GPT-4o的3%。输出端的差距更大:GPT-4o每百万输出tokens收费15美元,GPT-4o mini只需0.60美元,仅占4%。
如此大幅度的降价令人瞩目。即使与近期国内大模型厂商将百万tokens价格压低至1元到10元不等的做法相比,GPT-4o mini依然展现出强大的竞争力。以下两张图片展示了OpenAI官方公布的GPT-4o与GPT-4o mini的定价。


以下截图来源于OpenAI开发者X平台账号,展示了GPT-4o mini与GPT-3.5 Turbo的价格随时间演变的趋势。

更快的响应速度
GPT-4o mini凭借其低成本与低延迟特性,能够胜任众多实际应用场景。例如,同时或并行调用多个API、将大量上下文(如完整代码库或对话历史)输入模型,以及用于客户支持聊天机器人等需要实时响应的场景。
在速度方面,虽然我们尚未获得独立的实测数据,但回顾GPT-4o相较于GPT-4在响应速度上的显著提升,可以合理推测mini版的表现同样不会令人失望。
出色的性能表现
GPT-4o mini在文本智能与多模态推理的学术基准测试中全面超越了GPT-3.5 Turbo及其他小型模型,并且支持与GPT-4o相同的语言种类。
OpenAI官方发布了多项关键基准测试的评估数据:
推理任务:GPT-4o mini在文本与视觉推理方面均优于其他小型模型。在文本智能与推理基准MMLU中,其得分达到82.0%,而Gemini Flash为77.9%,Claude Haiku为73.8%。
数学与编码能力:GPT-4o mini在数学推理和编程任务中表现优异。在评估数学推理的MGSM基准中,GPT-4o mini得分87.0%,Gemini Flash为75.5%,Claude Haiku为71.7%。在衡量编码能力的HumanEval上,GPT-4o mini获得87.2%,Gemini Flash仅71.5%,Claude Haiku为75.9%。
多模态推理:在多模态推理评估MMMU中,GPT-4o mini得分59.4%,同样领先于Gemini Flash的56.1%和Claude Haiku的50.2%。
以下为基准评估结果截图。

