GPT-4o mini

GPT-4o Mini的评测

GPT-4o mini 在文本智能和多模态推理方面的学术基准测试中都超过了 GPT-3.5 Turbo 和其他小型模型，并支持与 GPT-4o 相同的语言范围。它还在函数调用方面表现出强大的性能，这使开发人员能够构建获取数据或使用外部系统执行操作的应用程序，并且与 GPT-3.5 Turbo 相比，它提高了长上下文性能。

GPT-4o mini 已在几个关键基准测试中进行了评估 。

1. 推理任务：GPT-4o mini 在涉及文本和视觉的推理任务方面优于其他小型模型，在文本智能和推理基准 MMLU 上得分为 82.0%，而 Gemini Flash 为 77.9%，Claude Haiku 为 73.8%。
2. 数学和编码能力：GPT-4o mini 在数学推理和编码任务方面表现出色，优于市场上以前的小型型号。在 MGSM 上，衡量数学推理，GPT-4o mini 得分为 87.0%，而 Gemini Flash 为 75.5%，Claude Haiku 为 71.7%。GPT-4o mini 在衡量编码性能的 HumanEval 上得分为 87.2%，而 Gemini Flash 为 71.5%，Claude Haiku 为 75.9%。
3. 多模态推理：GPT-4o mini 在多模态推理评估 MMMU 上也表现出强劲的表现，得分为 59.4%，而 Gemini Flash 为 56.1%，Claude Haiku 为 50.2%。

定价

GPT-4o mini 现在可在 Assistants API、Chat Completions API 和 Batch API 中用作文本和视觉模型。开发人员每 1M 输入令牌支付 15 美分，每 1M 输出令牌支付 60 美分（大约相当于一本标准书中的 2500 页）。我们计划在未来几天内推出 GPT-4o mini 的微调。

在 ChatGPT 中，Free、Plus 和 Team 用户将从今天开始访问 GPT-4o mini，而不是 GPT-3.5。从下周开始，企业用户也可以使用，这符合我们的使命，即让所有人都能享受人工智能的好处。