数据点: 70
Model compare
GPT-4 和 O1 的结论先放在这里,方便先判断是否值得继续看明细。
综合加权结果:O1。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。
结论
O1
O1 当前综合加权更高;模型 A / B 得分为 20 对 80。
证据覆盖
70 个数据点
包含 3 个 benchmark、0 个 audit 样本和 6 个 provider 样本。
选择依据
优先看 O1
下方图表把 9 组高信号样本拆开,便于核对速度、跑分和安全分。
左右两边都可以换成其他模型,页面会打开新的 LMSpeed 对比 URL。
选择其他模型后会打开新的对比页。
这份报告只使用 LMSpeed 已有数据:GPT-4 和 O1 的价格、测速聚合、第三方跑分与共同服务商样本。
| Model compare | GPT-4 | O1 |
|---|
| 综合领先 | 对照 | 领先 |
|---|---|---|
| 综合加权得分 | 20.0 分 | 80.0 分 |
| Benchmark 分类领先 | 0 类 | 1 类 |
| 运营维度优势 | 最低输入价格、免费服务商、服务商覆盖 | 暂无数据 |
| 上下文窗口 | 8.2K tokens | 200K tokens |
| 最大输出 | 4.1K tokens | 100K tokens |
| 模态 | 输入 文本 输出 文本 | 输入 文本 |
总体结果按 80% benchmark 能力分类和 20% 价格、API 速度/延迟与可用性加权;近期测试数量不参与胜负,缺失的 benchmark 分类不计分。
| Model compare | GPT-4 | O1 |
|---|---|---|
| 开发者 | OpenAI | OpenAI |
| 发布日期 | 2023年5月 | 2024年12月 |
| 参数量 | 暂无数据 | 暂无数据 |
| Tokenizer | GPT | GPT |
| 知识截止 | 2021-09-30 | 2023-10-31 |
| OpenRouter ID | openai/gpt-4 | openai/o1 |
| 来源链接 | 暂无数据 | 暂无数据 |
这份报告只使用 LMSpeed 已有数据:GPT-4 和 O1 的价格、测速聚合、第三方跑分与共同服务商样本。
GPT-4
GPT-4 的运营优势是:最低输入价格、免费服务商、服务商覆盖。
O1
O1 在 benchmark 分类中领先:代码。
来自 LMSpeed 同步的第三方 benchmark profile;只展示两个模型都有数值的指标。
按 0-100 分对比 benchmark 分类表现;点击分类可以聚焦查看差距。
平均分
GPT-4
49.5
平均分
O1
52.5
O1
O1 领先 1.7
O1
O1
O1
暂无数据
暂无数据
O1
按具体 benchmark 指标对比两个模型,展示来源、排名覆盖、置信度、误差和评测日期等上下文。
GPT-4
$37.50/M
排名 #160/162 · confidence 4
O1
领先$26.25/M
排名 #155/162 · confidence 4
GPT-4
$30.00/M
排名 #160/162 · confidence 4
O1
领先$15.00/M
排名 #155/162 · confidence 4
GPT-4
$60.00/M
排名 #155/162 · confidence 4
O1
$60.00/M
排名 #155/162 · confidence 4
来自共同 provider 的最近完成 audit,展示四个安全/完整性分组分数和报告入口。
| Provider | GPT-4 | O1 |
|---|---|---|
| 暂无共同 provider 的已完成 audit。 | ||
把同一 provider 的测速聚合和 input/output 价格放进同一行,便于判断实际 API 表现和迁移成本。
| Provider | GPT-4 | O1 |
|---|---|---|
0 次测试 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 | O1 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 | O1 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 | O1 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 | O1 speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | GPT-4 speed / latency N/A / N/A input / output 暂无数据 | O1 speed / latency N/A / N/A input / output 暂无数据 |
GPT-4 gpt-4-32k speed / latency 暂无数据 input / output $0/request | O1 o1 speed / latency 暂无数据 input / output $5.88/request |
综合加权结果:O1。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。
输出
| 能力 | 文本输入文本输出工具调用结构化输出JSON 模式 | 文本输入图像输入文件输入文本输出工具调用结构化输出JSON 模式推理 |
|---|