数据点: 79
Model compare
Gemini 1.5 Pro 和 GPT-4o 的结论先放在这里,方便先判断是否值得继续看明细。
综合加权结果:GPT-4o。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。
结论
GPT-4o
GPT-4o 当前综合加权更高;模型 A / B 得分为 44 对 56。
证据覆盖
79 个数据点
包含 11 个 benchmark、0 个 audit 样本和 8 个 provider 样本。
选择依据
优先看 GPT-4o
下方图表把 19 组高信号样本拆开,便于核对速度、跑分和安全分。
左右两边都可以换成其他模型,页面会打开新的 LMSpeed 对比 URL。
选择其他模型后会打开新的对比页。
这份报告只使用 LMSpeed 已有数据:Gemini 1.5 Pro 和 GPT-4o 的价格、测速聚合、第三方跑分与共同服务商样本。
| Model compare | Gemini 1.5 Pro | GPT-4o |
|---|
| 综合领先 | 对照 | 领先 |
|---|---|---|
| 综合加权得分 | 44.0 分 | 56.0 分 |
| Benchmark 分类领先 | 2 类 | 2 类 |
| 运营维度优势 | 首 token 延迟 | 最低输入价格、平均速度、免费服务商、服务商覆盖 |
| 上下文窗口 | 暂无数据 | 128K tokens |
| 最大输出 | 暂无数据 | 16.4K tokens |
| 模态 | 暂无数据 | 输入 文本图像文件 输出 文本 |
总体结果按 80% benchmark 能力分类和 20% 价格、API 速度/延迟与可用性加权;近期测试数量不参与胜负,缺失的 benchmark 分类不计分。
| Model compare | Gemini 1.5 Pro | GPT-4o |
|---|---|---|
| 开发者 | OpenAI | |
| 发布日期 | 暂无数据 | 2024年11月 |
| 参数量 | 暂无数据 | 暂无数据 |
| Tokenizer | 暂无数据 | GPT |
| 知识截止 | 暂无数据 | 2023-10-31 |
| OpenRouter ID | 暂无数据 | openai/gpt-4o |
| 来源链接 | 暂无数据 | 暂无数据 |
这份报告只使用 LMSpeed 已有数据:Gemini 1.5 Pro 和 GPT-4o 的价格、测速聚合、第三方跑分与共同服务商样本。
Gemini 1.5 Pro
Gemini 1.5 Pro 在 benchmark 分类(知识、数学)和运营维度(首 token 延迟)更强。
GPT-4o
GPT-4o 在 benchmark 分类(代码、推理)和运营维度(最低输入价格、平均速度、免费服务商、服务商覆盖)更强。
来自 LMSpeed 同步的第三方 benchmark profile;只展示两个模型都有数值的指标。
按 0-100 分对比 benchmark 分类表现;点击分类可以聚焦查看差距。
平均分
Gemini 1.5 Pro
44.8
平均分
GPT-4o
43.2
GPT-4o
GPT-4o 领先 6.0
GPT-4o 领先 0.3
Gemini 1.5 Pro 领先 5.3
Gemini 1.5 Pro 领先 1.4
暂无数据
暂无数据
GPT-4o
按具体 benchmark 指标对比两个模型,展示来源、排名覆盖、置信度、误差和评测日期等上下文。
Gemini 1.5 Pro
领先75.0%
排名 #89/125 · confidence 4
GPT-4o
74.8%
排名 #90/125 · confidence 4
Gemini 1.5 Pro
领先4.9%
排名 #138/187 · confidence 4
GPT-4o
3.3%
排名 #180/187 · confidence 4
Gemini 1.5 Pro
领先58.9%
排名 #144/188 · confidence 4
GPT-4o
54.3%
排名 #156/188 · confidence 4
Gemini 1.5 Pro
29.5
排名 #87/96 · confidence 1 · 评测日期 2024-02-15
GPT-4o
领先33.3
排名 #80/96 · confidence 1 · 评测日期 2024-05-13
Gemini 1.5 Pro
领先31.6%
排名 #86/115 · confidence 4
GPT-4o
30.9%
排名 #88/115 · confidence 4
Gemini 1.5 Pro
29.5%
排名 #139/185 · confidence 4
GPT-4o
领先33.3%
排名 #120/185 · confidence 4
Gemini 1.5 Pro
领先87.6%
排名 #38/74 · confidence 4
GPT-4o
75.9%
排名 #56/74 · confidence 4
Gemini 1.5 Pro
领先23.0%
排名 #46/68 · confidence 4
GPT-4o
15.0%
排名 #50/68 · confidence 4
Gemini 1.5 Pro
领先4.9
排名 #80/96 · confidence 1 · 评测日期 2024-02-15
GPT-4o
3.3
排名 #94/96 · confidence 1 · 评测日期 2024-05-13
Gemini 1.5 Pro
领先58.9
排名 #86/96 · confidence 1 · 评测日期 2024-02-15
GPT-4o
54.3
排名 #91/96 · confidence 1 · 评测日期 2024-05-13
Gemini 1.5 Pro
10.0
排名 #93/99 · confidence 1 · 评测日期 2024-02-15
GPT-4o
领先11.2
排名 #90/99 · confidence 1 · 评测日期 2024-05-13
来自共同 provider 的最近完成 audit,展示四个安全/完整性分组分数和报告入口。
| Provider | Gemini 1.5 Pro | GPT-4o |
|---|---|---|
| 暂无共同 provider 的已完成 audit。 | ||
把同一 provider 的测速聚合和 input/output 价格放进同一行,便于判断实际 API 表现和迁移成本。
| Provider | Gemini 1.5 Pro | GPT-4o |
|---|---|---|
20 次测试 | Gemini 1.5 Pro speed / latency N/A / N/A input / output 暂无数据 | GPT-4o speed / latency 88 tok/s / 1593ms input / output 暂无数据 |
5 次测试 | Gemini 1.5 Pro speed / latency N/A / N/A input / output 暂无数据 | GPT-4o speed / latency 48 tok/s / 13138ms input / output 暂无数据 |
0 次测试 | Gemini 1.5 Pro speed / latency N/A / N/A input / output 暂无数据 | GPT-4o speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Gemini 1.5 Pro speed / latency N/A / N/A input / output 暂无数据 | GPT-4o speed / latency N/A / N/A input / output 暂无数据 |
0 次测试 | Gemini 1.5 Pro speed / latency N/A / N/A input / output 暂无数据 | GPT-4o speed / latency N/A / N/A input / output 暂无数据 |
Gemini 1.5 Pro gemini-1.5-pro speed / latency 暂无数据 input / output $0/request | GPT-4o gpt-4o-2024-05-13 speed / latency 暂无数据 input / output $0/request | |
Gemini 1.5 Pro gemini-1.5-pro speed / latency 暂无数据 input / output $0.342/M/$1.37/M | GPT-4o gpt-4o-2024-05-13 speed / latency 暂无数据 input / output $0.685/M | |
Gemini 1.5 Pro gemini-1.5-pro-latest speed / latency 暂无数据 input / output $1.22/M/$4.90/M | GPT-4o gpt-4o-2024-05-13 speed / latency 暂无数据 input / output $8.57/M |
综合加权结果:GPT-4o。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。
| 能力 | 暂无 | 文本输入图像输入文件输入文本输出工具调用结构化输出JSON 模式联网搜索 |
|---|