数据点: 72
Model compare
Claude 3.5 Haiku 和 GPT-4 的结论先放在这里，方便先判断是否值得继续看明细。
综合加权结果：GPT-4。Benchmark 能力分类占 80%，价格、API 性能和可用性占 20%。
结论
GPT-4
GPT-4 当前综合加权更高；模型 A / B 得分为 4 对 96。
证据覆盖
72 个数据点
包含 3 个 benchmark、0 个 audit 样本和 9 个 provider 样本。
选择依据
优先看 GPT-4
下方图表把 12 组高信号样本拆开，便于核对速度、跑分和安全分。
左右两边都可以换成其他模型，页面会打开新的 LMSpeed 对比 URL。
选择其他模型后会打开新的对比页。
这份报告只使用 LMSpeed 已有数据：Claude 3.5 Haiku 和 GPT-4 的价格、测速聚合、第三方跑分与共同服务商样本。
| Model compare | Claude 3.5 Haiku | GPT-4 |
|---|
| 综合领先 | 对照 | 领先 |
|---|---|---|
| 综合加权得分 | 4.0 分 | 96.0 分 |
| Benchmark 分类领先 | 0 类 | 1 类 |
| 运营维度优势 | 平均速度 | 最低输入价格、首 token 延迟、免费服务商、服务商覆盖 |
| 上下文窗口 | 200K tokens | 8.2K tokens |
| 最大输出 | 8.2K tokens | 4.1K tokens |
| 模态 | 输入 文本图像 输出 文本 | 输入 文本 输出 文本 |
| 能力 | 文本输入图像输入文本输出工具调用 | 文本输入文本输出工具调用结构化输出JSON 模式 |
总体结果按 80% benchmark 能力分类和 20% 价格、API 速度/延迟与可用性加权；近期测试数量不参与胜负，缺失的 benchmark 分类不计分。
| Model compare | Claude 3.5 Haiku | GPT-4 |
|---|---|---|
| 开发者 | Anthropic | OpenAI |
| 发布日期 | 2024年11月 | 2023年5月 |
| 参数量 | 暂无数据 | 暂无数据 |
| Tokenizer | Claude | GPT |
| 知识截止 | 2024-07-31 | 2021-09-30 |
| OpenRouter ID | anthropic/claude-3.5-haiku | openai/gpt-4 |
| 来源链接 | 暂无数据 | 暂无数据 |
这份报告只使用 LMSpeed 已有数据：Claude 3.5 Haiku 和 GPT-4 的价格、测速聚合、第三方跑分与共同服务商样本。
Claude 3.5 Haiku
Claude 3.5 Haiku 的运营优势是：平均速度。
GPT-4
GPT-4 在 benchmark 分类（代码）和运营维度（最低输入价格、首 token 延迟、免费服务商、服务商覆盖）更强。
来自 LMSpeed 同步的第三方 benchmark profile；只展示两个模型都有数值的指标。
按 0-100 分对比 benchmark 分类表现；点击分类可以聚焦查看差距。
平均分
Claude 3.5 Haiku
41.4
平均分
GPT-4
49.5
暂无数据
GPT-4 领先 7.5
Claude 3.5 Haiku
暂无数据
Claude 3.5 Haiku
暂无数据
暂无数据
暂无数据
按具体 benchmark 指标对比两个模型，展示来源、排名覆盖、置信度、误差和评测日期等上下文。
Claude 3.5 Haiku
领先$4.00/M
排名 #94/163 · confidence 4
GPT-4
$60.00/M
排名 #156/163 · confidence 4
Claude 3.5 Haiku
领先$1.60/M
排名 #96/163 · confidence 4
GPT-4
$37.50/M
排名 #161/163 · confidence 4
Claude 3.5 Haiku
领先$0.800/M
排名 #97/163 · confidence 4
GPT-4
$30.00/M
排名 #161/163 · confidence 4
来自共同 provider 的最近完成 audit，展示四个安全/完整性分组分数和报告入口。
| Provider | Claude 3.5 Haiku | GPT-4 |
|---|---|---|
| 暂无共同 provider 的已完成 audit。 | ||
把同一 provider 的测速聚合和 input/output 价格放进同一行，便于判断实际 API 表现和迁移成本。
| Provider | Claude 3.5 Haiku | GPT-4 |
|---|---|---|
0 次测试 | Claude 3.5 Haiku speed / latency N/A / N/A input / output 暂无数据 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3.5 Haiku speed / latency N/A / N/A input / output 暂无数据 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3.5 Haiku speed / latency N/A / N/A input / output 暂无数据 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3.5 Haiku speed / latency N/A / N/A input / output 暂无数据 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Claude 3.5 Haiku speed / latency N/A / N/A input / output 暂无数据 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 |
Claude 3.5 Haiku claude-3-5-haiku-latest speed / latency 暂无数据 input / output $0.171/M/$0.856/M | GPT-4 gpt-4-32k speed / latency 暂无数据 input / output $60.00/M | |
Claude 3.5 Haiku claude-3-5-haiku-latest speed / latency 暂无数据 input / output $0.103/M/$0.514/M | GPT-4 gpt-4-32k-0613 speed / latency 暂无数据 input / output $60.00/M | |
Claude 3.5 Haiku claude-3-5-haiku-20241022 speed / latency 暂无数据 input / output $0.137/M/$0.685/M | GPT-4 gpt-4-32k-0613 speed / latency 暂无数据 input / output $8.22/M | |
Claude 3.5 Haiku claude-3-5-haiku-latest speed / latency 暂无数据 input / output $0.154/M/$0.771/M | GPT-4 gpt-4-32k speed / latency 暂无数据 input / output $90.00/M |
综合加权结果：GPT-4。Benchmark 能力分类占 80%，价格、API 性能和可用性占 20%。
