返回模型目录

Model compare

GPT-3.5 Turbo vs GPT-4

GPT-3.5 Turbo 和 GPT-4 的结论先放在这里,方便先判断是否值得继续看明细。

Key Takeaways

综合加权结果:GPT-4。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。

结论

GPT-4

GPT-4 当前综合加权更高;模型 A / B 得分为 14 对 86。

证据覆盖

78 个数据点

包含 6 个 benchmark、0 个 audit 样本和 10 个 provider 样本。

选择依据

优先看 GPT-4

下方图表把 16 组高信号样本拆开,便于核对速度、跑分和安全分。

切换对比模型

左右两边都可以换成其他模型,页面会打开新的 LMSpeed 对比 URL。

选择其他模型后会打开新的对比页。

对比总表

这份报告只使用 LMSpeed 已有数据:GPT-3.5 Turbo 和 GPT-4 的价格、测速聚合、第三方跑分与共同服务商样本。

Model compare
GPT-3.5 Turbo
GPT-4
综合领先对照领先
综合加权得分14.0 分86.0 分
Benchmark 分类领先0 类3 类
运营维度优势最低输入价格、平均速度、服务商覆盖首 token 延迟
上下文窗口16.4K tokens8.2K tokens
最大输出4.1K tokens4.1K tokens
模态

输入

文本

输出

文本

输入

文本

输出

文本
能力
文本输入文本输出工具调用结构化输出JSON 模式
文本输入文本输出工具调用结构化输出JSON 模式

总体结果按 80% benchmark 能力分类和 20% 价格、API 速度/延迟与可用性加权;近期测试数量不参与胜负,缺失的 benchmark 分类不计分。

模型元信息

Model compare
GPT-3.5 Turbo
GPT-4
开发者OpenAIOpenAI
发布日期2024年1月2023年5月
参数量暂无数据暂无数据
TokenizerGPTGPT
知识截止2021-09-302021-09-30
OpenRouter IDopenai/gpt-3.5-turboopenai/gpt-4
来源链接暂无数据暂无数据

什么时候选哪个模型

这份报告只使用 LMSpeed 已有数据:GPT-3.5 Turbo 和 GPT-4 的价格、测速聚合、第三方跑分与共同服务商样本。

GPT-3.5 Turbo

GPT-3.5 Turbo 的运营优势是:最低输入价格、平均速度、服务商覆盖。

GPT-4

GPT-4 在 benchmark 分类(代码、推理、数学)和运营维度(首 token 延迟)更强。

跑分对比

来自 LMSpeed 同步的第三方 benchmark profile;只展示两个模型都有数值的指标。

分类能力对比

按 0-100 分对比 benchmark 分类表现;点击分类可以聚焦查看差距。

模型 A 覆盖
3 / 8
模型 B 覆盖
3 / 8
共同覆盖
3 个共同分类

平均分

GPT-3.5 Turbo

40

平均分

GPT-4

42.4

Agents

暂无数据

GPT-3.5 Turbo-
GPT-4-

代码

GPT-4 领先 0.7

GPT-3.5 Turbo48.8
GPT-449.5

推理

GPT-4 领先 3.5

GPT-3.5 Turbo33.4
GPT-436.9

知识

暂无数据

GPT-3.5 Turbo-
GPT-4-

数学

GPT-4 领先 2.9

GPT-3.5 Turbo37.8
GPT-440.7

多语言

暂无数据

GPT-3.5 Turbo-
GPT-4-

多模态

暂无数据

GPT-3.5 Turbo-
GPT-4-

指令遵循

暂无数据

GPT-3.5 Turbo-
GPT-4-

专业跑分明细

按具体 benchmark 指标对比两个模型,展示来源、排名覆盖、置信度、误差和评测日期等上下文。

价格verified

Output price

GPT-3.5 Turbo

领先

$1.50/M

排名 #62/180 · confidence 4

+$58.50/M

GPT-4

$60.00/M

排名 #173/180 · confidence 4

价格verified

Blended price

GPT-3.5 Turbo

领先

$0.750/M

排名 #70/180 · confidence 4

+$36.75/M

GPT-4

$37.50/M

排名 #178/180 · confidence 4

价格verified

Input price

GPT-3.5 Turbo

领先

$0.500/M

排名 #82/180 · confidence 4

+$29.50/M

GPT-4

$30.00/M

排名 #178/180 · confidence 4

推理verified

MMLU-Pro

GPT-3.5 Turbo

46.2%

排名 #128/129 · confidence 4

+10.0%

GPT-4

领先

56.2%

排名 #121/129 · confidence 4

推理verified

GPQA

GPT-3.5 Turbo

29.7%

排名 #211/212 · confidence 4

+5.2%

GPT-4

领先

34.9%

排名 #205/212 · confidence 4

数学verified

MATH-500

GPT-3.5 Turbo

44.1%

排名 #70/73 · confidence 4

+12.7%

GPT-4

领先

56.8%

排名 #66/73 · confidence 4

API audit 对比

来自共同 provider 的最近完成 audit,展示四个安全/完整性分组分数和报告入口。

Provider
GPT-3.5 Turbo
GPT-4
暂无共同 provider 的已完成 audit。

Provider 数据样本

把同一 provider 的测速聚合和 input/output 价格放进同一行,便于判断实际 API 表现和迁移成本。

Provider
GPT-3.5 Turbo
GPT-4
Dream API15 次测试

GPT-3.5 Turbo

speed / latency

127 tok/s / 743ms

input / output

暂无数据

GPT-4

speed / latency

42 tok/s / 819ms

input / output

暂无数据

AZ Rix9 次测试

GPT-3.5 Turbo

speed / latency

140 tok/s / 460ms

input / output

暂无数据

GPT-4

speed / latency

28 tok/s / 668ms

input / output

暂无数据

42公益站0 次测试

GPT-3.5 Turbo

speed / latency

N/A / N/A

input / output

暂无数据

GPT-4

speed / latency

N/A / N/A

input / output

暂无数据

AASS API0 次测试

GPT-3.5 Turbo

speed / latency

N/A / N/A

input / output

暂无数据

GPT-4

speed / latency

N/A / N/A

input / output

暂无数据

AI API0 次测试

GPT-3.5 Turbo

speed / latency

N/A / N/A

input / output

暂无数据

GPT-4

speed / latency

N/A / N/A

input / output

暂无数据

GPT-3.5 Turbo

gpt-3.5-turbo-0613

speed / latency

暂无数据

input / output

$0/request

GPT-4

gpt-4

speed / latency

暂无数据

input / output

$0/request

GPT-3.5 Turbo

gpt-3.5-turbo-0125

speed / latency

暂无数据

input / output

$0.055/M/$0.110/M

GPT-4

gpt-4-all

speed / latency

暂无数据

input / output

$0.011/request

GPT-3.5 Turbo

gpt-3.5-turbo-0125

speed / latency

暂无数据

input / output

$0.055/M/$0.110/M

GPT-4

gpt-4-all

speed / latency

暂无数据

input / output

$0.011/request

GPT-3.5 Turbo

gpt-3.5-turbo-0125

speed / latency

暂无数据

input / output

$0.034/M/$0.103/M

GPT-4

gpt-4-all

speed / latency

暂无数据

input / output

$0.014/request

GPT-3.5 Turbo

gpt-3.5-turbo

speed / latency

暂无数据

input / output

$0.082/M/$0.164/M

GPT-4

gpt-4-all

speed / latency

暂无数据

input / output

$0.016/request

FAQ

综合加权结果:GPT-4。Benchmark 能力分类占 80%,价格、API 性能和可用性占 20%。

这个比较为什么能收录?
它至少有 6 个可验证比较点,并且两个模型都有价格或测速数据。
没有数据的指标会不会编?
不会。没有 LMSpeed 数据的指标不会出现在这份报告里。

排名基于社区提交的测试数据与定期健康探测,仅供参考,非官方数据。