直接答案:Kimi K3、DeepSeek V4、GPT-5.6 和 Claude 5 没有脱离任务的“总冠军”。面向中文用户、需要 Kimi 网页产品、Kimi Code、开放平台 API 或开放权重时,K3 值得优先验证;需要在 DeepSeek 的 Pro/Flash 成本梯度中选择时,先区分 V4-Pro 与 V4-Flash;已经使用 OpenAI 工具链、Codex 或需要不同能力/成本档位时,评估 GPT-5.6 系列;复杂编码与企业知识工作可把 Claude Opus 5、Sonnet 5 纳入候选,最高能力入口则要确认 Fable 5 的价格和拒答处理。最终决定必须来自相同输入、参数、工具和评分规则下的业务测试,而不是厂商各自公布的不同基准。
时效边界:本文依据 2026 年 7 月 29 日可访问的四家官方模型、API、价格、版本和生命周期文档整理。型号、价格、配额、可用地区和产品入口会变化,采购或上线前应再次核对官方当前页面。本文没有替读者购买四家 API,也没有伪造跑分、响应速度或长期稳定性数据。
先纠正旧稿:这不是一篇“体验分数榜”
此 URL 的旧稿声称使用 Kimi K2.5 对 300 页招股书做过压力测试,并给出 15 秒索引、200ms 首字、一次生成可运行代码、连续高负载无中断和“未出现幻觉”等结论,但站点没有保存原始文件、请求、模型 ID、参数、时间、输出、费用或人工验收记录。这些内容不构成实测,已全部撤回。
新版本把信息分成两层:第一层是官方资料能够确认的入口、上下文、模型 ID、工具能力、开放权重和价格规则;第二层是只有本站或读者用同题样本才能验证的质量、延迟、成本和人工修订量。两层不能混写。
四类模型当前分别是什么
| 候选 | 当前主要入口 | 官方定位里值得验证的方向 | 不能直接推出 |
|---|---|---|---|
| Kimi K3 | Kimi 产品、Kimi Code、开放平台 API、开放权重 | 长上下文、视觉、编程、Agent 与中文知识工作 | 不能推出普通电脑可部署或中文任务必胜 |
| DeepSeek V4 | DeepSeek API 的 V4-Pro / V4-Flash | Pro 与 Flash 的能力、速度和成本梯度 | 不能继续把已弃用旧别名当成长期固定型号 |
| GPT-5.6 | OpenAI 产品与 API 的 Sol / Terra / Luna 系列 | 通用知识工作、编程、Agent 和不同成本档位 | ChatGPT 产品体验不等于某个固定 API 模型 |
| Claude 5 | Fable、Opus、Sonnet 等 Claude API 与云平台入口 | 长程 Agent、复杂编码、企业工作和速度/能力梯度 | 不能把邀请制或高价入口写成所有用户默认可用 |
Kimi 官方 API 概览与 K3 快速开始说明,开放平台直接调用的模型 ID 为 kimi-k3,中国站 OpenAI 兼容根地址为 https://api.moonshot.cn/v1;K3 始终使用思考,可用 reasoning_effort 调节。K3 官方仓库和 Hugging Face 文件树已开放完整权重,但约 1.56TB 的文件规模不等于普通个人电脑可运行。模型全貌见本站 Kimi K3 完整指南。
DeepSeek 官方 更新记录显示,API 已支持 V4-Pro 与 V4-Flash;旧 deepseek-chat 和 deepseek-reasoner 名称计划于 2026 年 7 月 24 日弃用。调用前应通过 List Models确认当前模型,而不是从旧教程复制型号。
OpenAI 的 GPT-5.6 发布说明把系列分为 Sol、Terra 与 Luna 三个档位,分别面向旗舰、均衡和成本效率。实际接入仍应从 官方模型目录读取可用 API ID,并在 API 价格页核对费用。
Anthropic 的 模型总览列出 Claude Fable 5、Opus 5、Sonnet 5 与 Haiku 4.5,并给出上下文、输出、价格和延迟档位;官方 模型 ID 与版本说明强调,4.6 及以后不带日期的 ID 仍是固定快照,不是永远指向最新模型的别名。
按入口选择:网页产品、编程工具、API 和开放权重不是一回事
| 需求 | 优先比较什么 | 常见误区 |
|---|---|---|
| 个人网页对话 | 所在地区可用性、套餐、文件与联网工具 | 把网页会员费用当成 API 价格 |
| IDE / CLI 编程 | Kimi Code、Codex、Claude Code 等具体产品和权限模式 | 只比较底层模型名称,不比较工具链 |
| 产品 API | 模型 ID、协议、速率、缓存、Batch、结构化输出和工具调用 | 把聊天产品的界面能力当成 API 参数 |
| 私有部署 | 权重、许可证、硬件、推理框架和运维能力 | 把“权重可下载”写成“一键本地部署” |
Kimi 的开放平台与 Kimi Code 使用不同密钥和接口;具体接入可看 Kimi K3 API 与 Kimi Code 教程。如果必须把模型放在自有硬件上,则应阅读 AI 本地部署专题,单独计算显存、并行、量化、存储和运维责任。OpenAI、Anthropic 的托管 API 与 K3 的开放权重不是同一交付模式,不能只用参数量对齐。
按任务选择:哪些方向值得优先进入候选集
| 任务 | 初筛建议 | 必须实测的指标 |
|---|---|---|
| 中文长文档 | K3、Claude 5 与支持目标长度的其他模型 | 证据页码、跨章节召回、数字复算、引用完整性 |
| 代码库修复 | K3/Kimi Code、DeepSeek V4-Pro、GPT-5.6、Claude Opus/Sonnet | 测试通过率、无关改动、命令安全、人工修订时间 |
| 高吞吐抽取 | 各家的均衡或轻量档位 | Schema 合法率、字段准确率、每个合格结果成本 |
| Agent 工具调用 | 支持工具调用和稳定消息状态的具体 API | 工具选择、参数、终止、失败恢复与权限越界 |
| 视觉文档 | 明确支持图像输入的当前型号 | 表格、图例、坐标、OCR、页码和公式 |
| 敏感企业数据 | 满足地区、合同、保留与审计要求的入口 | 数据流、日志、供应商边界、删除与事件响应 |
“支持 1M 上下文”只说明最大输入边界,不保证每个位置都能正确召回,也不保证整窗输入最经济。长文档任务应使用头中尾探针、页码证据和数字复算,方法见 Kimi K3 文档分析验收。工具调用则要把模型建议与应用执行分开,通用治理可对照 AI Agent 与工具治理指南。
官方规格能比较什么,不能比较什么
| 资料类型 | 可以确认 | 不可以确认 |
|---|---|---|
| 模型目录 | 型号、状态、上下文和支持能力 | 你的任务准确率 |
| 价格页 | 标价、缓存和 Batch 规则 | 每个合格任务最终成本 |
| 厂商基准 | 厂商公开的测试设定与结果 | 不同厂商表格可直接拼成统一排名 |
| 模型卡/系统卡 | 设计、评测、安全和已知限制 | 生产环境不会出现新失败 |
| 开放权重许可证 | 授权条件与归属要求 | 硬件足够或部署已经通过验收 |
不同厂商可能使用不同版本、提示词、工具、采样参数、运行环境和评分器。同名基准的实现也可能变化。因此本文不会把 Kimi、DeepSeek、OpenAI 和 Anthropic 各自发布的最佳数字复制进一张“总分表”。想理解排行榜偏差,可看本站 Arena 排行榜原理与模型选型指南。
怎样做一次可以公开复核的同题测试
| 记录字段 | 最低要求 | 为什么必要 |
|---|---|---|
| 样本 | 公开或已获授权,附哈希与预期答案 | 避免事后更换题目 |
| 模型 | 完整模型 ID、入口、地区和运行时间 | 品牌名无法定位版本 |
| 配置 | 系统提示、温度、effort、工具和 token 限制 | 参数差异会改变结果 |
| 输出 | 保存原始完整响应、错误、重试与工具结果 | 不能只展示成功片段 |
| 成本 | 输入、输出、缓存、工具和重试费用 | 标价不是单任务成本 |
| 评分 | 隐藏模型名,多人按同一 rubric 独立评分 | 降低品牌和表达风格偏差 |
| 复测 | 模型更新后用相同环境重跑 | 结果有版本和时间边界 |
本站后续首批测试将覆盖公开长文档证据召回、带测试的代码 bug、只读工具调用、JSON Schema 抽取和中文事实核验。每类至少 10 个样本后才讨论趋势;单个成功案例只作为案例,不写成“全面领先”。完整测试记录格式已写入本站运营交接,不会用模型自己给自己的答案打分。
成本怎么比:使用“通过验收的单任务总成本”
Kimi 的 K3 价格页、DeepSeek 的 模型与价格、OpenAI 的 API 价格页和 Anthropic 的 价格文档可以确认标价,但真实业务成本还包括缓存、工具调用、失败重试和人工核验。
| 成本项 | 记录方法 | 容易漏掉的部分 |
|---|---|---|
| 调用 | 输入、缓存输入、输出与工具 token | 联网搜索或工具返回占用的上下文 |
| 延迟 | 首个可用结果与最终合格结果时间 | 重试、排队和人工等待 |
| 修订 | 核验、改写和审批分钟数 | 格式正确但事实错误的返工 |
| 失败 | 超时、拒答、限流、工具失败和回滚 | 只统计成功请求 |
| 治理 | 权限、日志、合规、监控和事件处理 | 上线后的长期维护 |
| 迁移 | 型号弃用、提示词调整和回归测试 | 把别名当成永久稳定型号 |
推荐计算:单任务总成本 = API 调用 + 工具 + 失败重试 + 人工修订 + 分摊后的治理与迁移成本;然后只统计通过验收的任务。若一个便宜模型需要更多返工,它的最终成本可能高于标价更高但一次通过率更高的候选。
四种典型选择建议
| 场景 | 建议进入首轮候选 | 决策条件 |
|---|---|---|
| 中文团队做长文档与 Agent | K3 + 至少一个外部对照模型 | 证据召回、工具可靠性、地区和成本 |
| 代码产品已有 OpenAI/Anthropic 工具链 | GPT-5.6、Claude Opus/Sonnet、K3、DeepSeek V4-Pro | 仓库测试、权限、无关改动和修订时间 |
| 高吞吐分类抽取 | 各家均衡/快速档位 | 字段准确率、延迟和每千个合格结果成本 |
| 必须自有硬件部署 | 先筛选真正开放权重且许可证合适的模型 | 硬件、框架、量化损失、运维和安全 |
如果只想在 Kimi 内部选择 K3、K2.6 与 K3 Cluster,阅读 Kimi 模型与入口对比;如果要比较扣子、Kimi 与豆包的产品工作流,阅读 扣子、Kimi、豆包怎么选。这些页面分别解决不同搜索意图,本文不把它们合并成一个“大而全排行榜”。
不要忽略版本生命周期与迁移成本
模型选型不是一次采购后永久不变。DeepSeek 已明确给出旧模型别名的弃用日期;Anthropic 为每个模型维护 active、legacy、deprecated、retired 等生命周期状态;OpenAI 和 Kimi 也会更新产品入口、模型 ID、价格和能力边界。一个应用如果把模型名称、上下文限制和响应字段散落在几十处代码里,每次升级都会变成高风险改造。
| 迁移控制 | 推荐做法 | 验收证据 |
|---|---|---|
| 模型注册表 | 集中保存供应商、模型 ID、地区、能力、状态和替代型号 | 配置变更记录与审批人 |
| 接口适配层 | 把厂商请求、响应、错误与工具格式映射到内部契约 | 契约测试覆盖每个供应商 |
| 固定回归集 | 每次换型号重跑长文档、代码、抽取、工具和安全样本 | 新旧结果差异与人工判定 |
| 灰度与回退 | 先让小比例真实任务进入新模型,异常时自动回旧版本 | 路由比例、错误率和回退日志 |
| 成本警戒线 | 按租户、任务和模型设置日预算与异常增长告警 | 预算触发和熔断记录 |
| 退役计划 | 在厂商截止日前完成替换、复测和旧密钥清理 | 迁移清单与完成日期 |
建议应用使用内部逻辑名称,例如 long_document_primary、coding_fallback,再由配置把逻辑名称映射到当前固定模型 ID。业务代码不应假设某个不带日期的名字一定自动升级,也不能在供应商临时不可用时直接把包含敏感数据的请求转发到未经批准的另一个平台。
迁移测试至少检查五类差异。第一,输出长度和停止原因是否改变,避免新模型把原本完整的 JSON 截断。第二,工具调用参数、并行方式和消息保留规则是否改变,避免应用重复执行有副作用的动作。第三,思考或 effort 参数是否仍受支持,默认值是否变化。第四,安全拒答、内容过滤和错误码是否需要新的处理分支。第五,缓存键、Batch、速率限制和计费单位是否变化。只有业务测试通过,才能把新版本流量从 1% 逐步提升。
对于带写入权限的 Agent,模型升级还要重新验证授权边界。即使新模型在代码或工具基准上更强,也不能因此扩大数据库、邮件、支付或文件系统权限。比较时应给四类候选完全相同的只读工具和沙箱;任何需要写入的步骤先变成预览,由人工确认后再执行。这样测到的是模型在同一治理条件下的差异,而不是谁获得了更宽松的权限。
如果供应商只提供滚动别名而无法固定快照,应记录每次请求的实际模型版本或服务返回标识,并提高回归频率。若无法获取任何版本证据,则不能对小幅质量变化做确定归因;此时更应该保留样本、时间、区域和完整响应,避免用单个失败推断模型整体退化。
如何解释测试结果,避免再次写成营销榜
测试完成后,先公开样本覆盖和限制,再写结论。假如 K3 在 10 个中文长文档样本中证据定位更完整,只能写“在这组样本与配置下,K3 的证据完整性更高”,不能扩展成“K3 长文本全面第一”。如果 GPT-5.6 在一个代码仓库修复中用时最短,也不能推断它在所有语言和仓库上速度最快。
结果至少同时展示成功率、严重错误、人工修订时间、总成本和置信区间或样本量。平均分可能掩盖灾难性失败:两个模型平均都是 85 分,其中一个每次都接近 85,另一个多数满分但偶尔产生危险写入建议,它们的生产风险完全不同。高影响业务应单独统计“不可接受失败率”,并把任何权限越界、伪造来源、错误金额和不可回滚写入视为阻断项。
模型之间的差距如果小于评分人分歧,就不应宣布胜负。可将分歧样本交给第三位复核者,并公开评分规则;如果模型 A 更准确但模型 B 更便宜,应按业务对错误成本的容忍度给出条件式建议,而不是强行合成一个主观总分。对于搜索用户,条件式答案往往比“第一名”更有用,因为他们真正要决定的是自己的入口、预算和风险。
最后,评测页需要保留版本历史。模型、价格或工具能力变化时,不只是修改发布日期,而应记录“本次更改了哪些规格、是否重跑样本、哪些旧结论仍成立”。没有重跑时只更新官方规格,不应把旧测试结果自动继承给新模型。这也是本站以后处理热点模型的固定规则。
上线或采购前的最终清单
- 确认比较的是具体模型 ID 和具体产品入口,而不是品牌名。
- 确认账户、地区、数据处理、合同和付款方式可用。
- 用当前官方模型列表检查弃用、快照和迁移日期。
- 建立至少五类真实任务样本,并定义可核验答案。
- 固定提示、参数、工具、环境、时间和预算。
- 保存完整输入输出、错误、重试、token、费用和耗时。
- 盲评事实、完整性、格式、工具行为和人工修订时间。
- 用每个通过验收任务的总成本比较,不只看单价。
- 高风险动作设置最小权限、人工确认、审计和回滚。
- 保留第二供应商或安全降级路径,并定期回归复测。
满足这些条件后,选择结果才属于你的业务,而不是把厂商营销换一种说法。关于模型 API 的通用接入与治理,可以继续阅读 模型与 API 专题和 关于兰塞 AI 与编辑规范。
来源与复核记录
本文由兰塞 AI 编辑部于 2026 年 7 月 29 日重建。旧稿中千万级上下文、接近 100% 准确率、300 页招股书 15 秒索引、200ms 首字、零幻觉和连续高负载稳定等内容均因没有原始证据而删除。本次以四家官方资料确认当前产品和版本边界,不虚构本站已经完成跨厂商付费压测。
除正文已链接资料外,还核验了 Kimi 完整文档索引、K3 官方仓库和 许可证,DeepSeek 当前 API 调用说明,OpenAI GPT-5.5 历史版本说明,以及 Anthropic 模型弃用记录。历史发布页用于识别迁移背景,不代表仍推荐旧型号。
