数据点: 77
Model compare
Claude 3.5 Sonnet 和 GPT-4o Mini 的结论先放在这里，方便先判断是否值得继续看明细。
综合加权结果：GPT-4o Mini。Benchmark 能力分类占 80%，价格、API 性能和可用性占 20%。
结论
GPT-4o Mini
GPT-4o Mini 当前综合加权更高；模型 A / B 得分为 30.7 对 69.3。
证据覆盖
77 个数据点
包含 10 个 benchmark、0 个 audit 样本和 8 个 provider 样本。
选择依据
优先看 GPT-4o Mini
下方图表把 18 组高信号样本拆开，便于核对速度、跑分和安全分。
左右两边都可以换成其他模型，页面会打开新的 LMSpeed 对比 URL。
选择其他模型后会打开新的对比页。
这份报告只使用 LMSpeed 已有数据：Claude 3.5 Sonnet 和 GPT-4o Mini 的价格、测速聚合、第三方跑分与共同服务商样本。
| Model compare | Claude 3.5 Sonnet | GPT-4o Mini |
|---|
| 综合领先 | 对照 | 领先 |
|---|---|---|
| 综合加权得分 | 30.7 分 | 69.3 分 |
| Benchmark 分类领先 | 1 类 | 2 类 |
| 运营维度优势 | 首 token 延迟 | 最低输入价格、平均速度、免费服务商、服务商覆盖 |
| 上下文窗口 | 暂无数据 | 128K tokens |
| 最大输出 | 暂无数据 | 16.4K tokens |
| 模态 | 暂无数据 | 输入 文本图像文件 输出 文本 |
| 能力 | 暂无 | 文本输入图像输入文件输入文本输出工具调用结构化输出JSON 模式联网搜索 |
总体结果按 80% benchmark 能力分类和 20% 价格、API 速度/延迟与可用性加权；近期测试数量不参与胜负，缺失的 benchmark 分类不计分。
| Model compare | Claude 3.5 Sonnet | GPT-4o Mini |
|---|---|---|
| 开发者 | Anthropic | OpenAI |
| 发布日期 | 暂无数据 | 2024年7月 |
| 参数量 | 暂无数据 | 暂无数据 |
| Tokenizer | 暂无数据 | GPT |
| 知识截止 | 暂无数据 | 2023-10-31 |
| OpenRouter ID | 暂无数据 | openai/gpt-4o-mini |
| 来源链接 | 暂无数据 | 暂无数据 |
这份报告只使用 LMSpeed 已有数据：Claude 3.5 Sonnet 和 GPT-4o Mini 的价格、测速聚合、第三方跑分与共同服务商样本。
Claude 3.5 Sonnet
Claude 3.5 Sonnet 在 benchmark 分类（推理）和运营维度（首 token 延迟）更强。
GPT-4o Mini
GPT-4o Mini 在 benchmark 分类（代码、数学）和运营维度（最低输入价格、平均速度、免费服务商、服务商覆盖）更强。
来自 LMSpeed 同步的第三方 benchmark profile；只展示两个模型都有数值的指标。
按 0-100 分对比 benchmark 分类表现；点击分类可以聚焦查看差距。
平均分
Claude 3.5 Sonnet
41.5
平均分
GPT-4o Mini
42
GPT-4o Mini
GPT-4o Mini 领先 1.3
Claude 3.5 Sonnet 领先 4.4
GPT-4o Mini
GPT-4o Mini 领先 3.1
暂无数据
暂无数据
GPT-4o Mini
按具体 benchmark 指标对比两个模型，展示来源、排名覆盖、置信度、误差和评测日期等上下文。
Claude 3.5 Sonnet
$6.00/M
排名 #139/163 · confidence 4
GPT-4o Mini
领先$0.262/M
排名 #21/163 · confidence 4
Claude 3.5 Sonnet
$3.00/M
排名 #139/163 · confidence 4
GPT-4o Mini
领先$0.150/M
排名 #21/163 · confidence 4
Claude 3.5 Sonnet
$15.00/M
排名 #138/163 · confidence 4
GPT-4o Mini
领先$0.600/M
排名 #23/163 · confidence 4
Claude 3.5 Sonnet
领先77.2%
排名 #78/125 · confidence 4
GPT-4o Mini
64.8%
排名 #112/125 · confidence 4
Claude 3.5 Sonnet
领先59.9%
排名 #140/187 · confidence 4
GPT-4o Mini
42.6%
排名 #172/187 · confidence 4
Claude 3.5 Sonnet
3.9%
排名 #164/186 · confidence 4
GPT-4o Mini
领先4.0%
排名 #161/186 · confidence 4
Claude 3.5 Sonnet
领先38.1%
排名 #77/115 · confidence 4
GPT-4o Mini
23.4%
排名 #101/115 · confidence 4
Claude 3.5 Sonnet
领先36.6%
排名 #99/184 · confidence 4
GPT-4o Mini
22.9%
排名 #165/184 · confidence 4
Claude 3.5 Sonnet
领先15.7%
排名 #49/68 · confidence 4
GPT-4o Mini
11.7%
排名 #55/68 · confidence 4
Claude 3.5 Sonnet
77.1%
排名 #53/72 · confidence 4
GPT-4o Mini
领先78.9%
排名 #51/72 · confidence 4
来自共同 provider 的最近完成 audit，展示四个安全/完整性分组分数和报告入口。
| Provider | Claude 3.5 Sonnet | GPT-4o Mini |
|---|---|---|
| 暂无共同 provider 的已完成 audit。 | ||
把同一 provider 的测速聚合和 input/output 价格放进同一行，便于判断实际 API 表现和迁移成本。
| Provider | Claude 3.5 Sonnet | GPT-4o Mini |
|---|---|---|
10 次测试 | Claude 3.5 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency 84 tok/s / 5980ms input / output 暂无数据 |
10 次测试 | Claude 3.5 Sonnet speed / latency 39 tok/s / 4753ms input / output 暂无数据 | GPT-4o Mini speed / latency 78 tok/s / 1046ms input / output 暂无数据 |
2 次测试 | Claude 3.5 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency 83 tok/s / 1341ms input / output 暂无数据 |
0 次测试 | Claude 3.5 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3.5 Sonnet speed / latency N/A / N/A input / output 暂无数据 | GPT-4o Mini speed / latency N/A / N/A input / output 暂无数据 |
Claude 3.5 Sonnet claude-3-5-sonnet-all speed / latency 暂无数据 input / output $0.011/request | GPT-4o Mini gpt-4o-mini speed / latency 暂无数据 input / output $0.150/M | |
Claude 3.5 Sonnet claude-3-5-sonnet-all speed / latency 暂无数据 input / output $0.011/request | GPT-4o Mini gpt-4o-mini-2024-07-18 speed / latency 暂无数据 input / output $0.150/M | |
Claude 3.5 Sonnet claude-3-5-sonnet-all speed / latency 暂无数据 input / output $0.013/request | GPT-4o Mini gpt-4o-mini-2024-07-18 speed / latency 暂无数据 input / output $0.225/M |
综合加权结果：GPT-4o Mini。Benchmark 能力分类占 80%，价格、API 性能和可用性占 20%。
