GPT Load 是一个 OpenAI 兼容的 API 负载均衡服务,将请求分发到多个 AI 模型提供商。
分类
GPT Load (AllAI) 目前提供 17 个大模型 API。
速度基准测试平均吞吐 269 tok/s。
GPT Load (AllAI) 是一个 API 聚合平台,提供来自多个供应商的模型。
https://allaiload.dpdns.org