数据点: 71
Model compare
Claude 3 Sonnet 和 GPT-4o Mini 的结论先放在这里,方便先判断是否值得继续看明细。
综合加权结果:GPT-4o Mini。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。
结论
GPT-4o Mini
GPT-4o Mini 当前综合加权更高;模型 A / B 得分为 0 对 100。
证据覆盖
71 个数据点
包含 10 个 benchmark、0 个 audit 样本和 7 个 provider 样本。
选择依据
优先看 GPT-4o Mini
下方图表把 17 组高信号样本拆开,便于核对速度、跑分和安全分。
左右两边都可以换成其他模型,页面会打开新的 LMSpeed 对比 URL。
选择其他模型后会打开新的对比页。
这份报告只使用 LMSpeed 已有数据:Claude 3 Sonnet 和 GPT-4o Mini 的价格、测速聚合、第三方跑分与共同服务商样本。
| Model compare | Claude 3 Sonnet | GPT-4o Mini |
|---|
| 综合领先 | 对照 | 领先 |
|---|---|---|
| 综合加权得分 | 0.0 分 | 100.0 分 |
| Benchmark 分类领先 | 0 类 | 3 类 |
| 运营维度优势 | 暂无数据 | 最低输入价格、免费服务商、服务商覆盖 |
| 上下文窗口 | 暂无数据 | 128K tokens |
| 最大输出 | 暂无数据 | 16.4K tokens |
| 模态 | 暂无数据 | 输入 文本图像文件 输出 文本 |
| 能力 | 暂无 | 文本输入图像输入文件输入文本输出工具调用结构化输出JSON 模式联网搜索 |
总体结果按 80% benchmark 能力分类和 20% 价格、API 速度/延迟与可用性加权;近期测试数量不参与胜负,缺失的 benchmark 分类不计分。
| Model compare | Claude 3 Sonnet | GPT-4o Mini |
|---|---|---|
| 开发者 | Anthropic | OpenAI |
| 发布日期 | 暂无数据 | 2024年7月 |
| 参数量 | 暂无数据 | 暂无数据 |
| Tokenizer | 暂无数据 | GPT |
| 知识截止 | 暂无数据 | 2023-10-31 |
| OpenRouter ID | 暂无数据 | openai/gpt-4o-mini |
| 来源链接 | 暂无数据 | 暂无数据 |
这份报告只使用 LMSpeed 已有数据:Claude 3 Sonnet 和 GPT-4o Mini 的价格、测速聚合、第三方跑分与共同服务商样本。
Claude 3 Sonnet
Claude 3 Sonnet 暂未在双方共同覆盖的 benchmark 或运营指标中明显领先。
GPT-4o Mini
GPT-4o Mini 在 benchmark 分类(代码、推理、数学)和运营维度(最低输入价格、免费服务商、服务商覆盖)更强。
来自 LMSpeed 同步的第三方 benchmark profile;只展示两个模型都有数值的指标。
按 0-100 分对比 benchmark 分类表现;点击分类可以聚焦查看差距。
平均分
Claude 3 Sonnet
38.1
平均分
GPT-4o Mini
42.8
GPT-4o Mini
GPT-4o Mini 领先 1.2
GPT-4o Mini 领先 2.3
GPT-4o Mini
GPT-4o Mini 领先 6.7
GPT-4o Mini
GPT-4o Mini
GPT-4o Mini
按具体 benchmark 指标对比两个模型,展示来源、排名覆盖、置信度、误差和评测日期等上下文。
Claude 3 Sonnet
$6.00/M
排名 #139/163 · confidence 4
GPT-4o Mini
领先$0.262/M
排名 #21/163 · confidence 4
Claude 3 Sonnet
$3.00/M
排名 #139/163 · confidence 4
GPT-4o Mini
领先$0.150/M
排名 #21/163 · confidence 4
Claude 3 Sonnet
$15.00/M
排名 #138/163 · confidence 4
GPT-4o Mini
领先$0.600/M
排名 #23/163 · confidence 4
Claude 3 Sonnet
57.9%
排名 #116/125 · confidence 4
GPT-4o Mini
领先64.8%
排名 #112/125 · confidence 4
Claude 3 Sonnet
3.8%
排名 #167/186 · confidence 4
GPT-4o Mini
领先4.0%
排名 #161/186 · confidence 4
Claude 3 Sonnet
40.0%
排名 #178/187 · confidence 4
GPT-4o Mini
领先42.6%
排名 #172/187 · confidence 4
Claude 3 Sonnet
17.5%
排名 #109/115 · confidence 4
GPT-4o Mini
领先23.4%
排名 #101/115 · confidence 4
Claude 3 Sonnet
22.9%
排名 #165/184 · confidence 4
GPT-4o Mini
22.9%
排名 #165/184 · confidence 4
Claude 3 Sonnet
41.4%
排名 #70/72 · confidence 4
GPT-4o Mini
领先78.9%
排名 #51/72 · confidence 4
Claude 3 Sonnet
4.7%
排名 #61/68 · confidence 4
GPT-4o Mini
领先11.7%
排名 #55/68 · confidence 4
来自共同 provider 的最近完成 audit,展示四个安全/完整性分组分数和报告入口。
| Provider | Claude 3 Sonnet | GPT-4o Mini |
|---|---|---|
| 暂无共同 provider 的已完成 audit。 | ||
把同一 provider 的测速聚合和 input/output 价格放进同一行,便于判断实际 API 表现和迁移成本。
| Provider | Claude 3 Sonnet | GPT-4o Mini |
|---|---|---|
0 次测试 | Claude 3 Sonnet claude-3-sonnet-20240229 speed / latency N/A / N/A input / output $21.00/M/$105.00/M | GPT-4o Mini gpt-4o-mini-2024-07-18 speed / latency N/A / N/A input / output $1.05/M/$4.20/M |
0 次测试 | Claude 3 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3 Sonnet claude-3-sonnet-20240229 speed / latency N/A / N/A input / output $3.00/M/$15.00/M | GPT-4o Mini mm/gpt-4o-mini speed / latency N/A / N/A input / output $0.300/M |
Claude 3 Sonnet claude-3-sonnet-20240229 speed / latency 暂无数据 input / output $0.411/M/$2.05/M | GPT-4o Mini gpt-4o-mini speed / latency 暂无数据 input / output $0.021/M | |
Claude 3 Sonnet claude-3-sonnet-20240229 speed / latency 暂无数据 input / output $3.60/M/$18.00/M | GPT-4o Mini gpt-4o-mini speed / latency 暂无数据 input / output $0.052/M |
综合加权结果:GPT-4o Mini。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。