便宜模型真的够用了吗?从 GLM、Qwen、DeepSeek、Kimi 看大模型应用的成本工程
2026 年之后,大模型竞争的焦点不再只是“谁更聪明”,而是“谁能在可接受质量下把成本打下来”。GLM、Qwen、DeepSeek、Kimi 等中国模型正在把这个问题推到台前:便宜模型到底够不够用?企业和开发者应该直接替换,还是做模型路由和分层调用?
摘要
最近 AI 圈对中国低成本模型的讨论明显升温。GLM-5.2、DeepSeek-V4、Qwen 系列、Kimi K2.x 等模型不断把“性能接近前沿模型、价格明显更低”这个话题拉回开发者视野。
但如果只问:
哪个模型更便宜?这个问题其实不够工程化。
真实应用里更应该问:
哪些任务可以用便宜模型? 哪些任务必须用强模型? 如何评估质量下降是否可接受? 如何把模型价格、延迟、上下文、工具调用和合规风险一起算进去? 如何设计一套能自动降本的模型路由?本文从工程实践角度分析 GLM、Qwen、DeepSeek、Kimi 等低成本模型的价值,不做简单吹捧,也不做简单否定。结论先放前面:
便宜模型不是万能替代品,但它们已经足够承担大量中低风险、高频、可验证任务。 真正合理的做法不是“一刀切替换”,而是建立模型分层、成本监控和质量评测。目录
- 一、为什么低成本模型突然变得重要
- 二、价格差距到底有多大
- 三、便宜模型为什么能便宜
- 四、不能只看每百万 token 单价
- 五、哪些场景适合低成本模型
- 六、哪些场景不建议直接替换
- 七、模型路由:比“选一个模型”更重要
- 八、一个无依赖成本估算脚本
- 九、如何做质量评测
- 十、自建部署和 API 调用怎么选
- 十一、合规、安全和供应链风险
- 十二、个人开发者和小团队的推荐路线
- 十三、总结
一、为什么低成本模型突然变得重要
过去很多团队做 AI 应用时,默认思路是:
直接用最强模型原因很简单:
原型阶段调用量不大,贵一点也能接受。
但到了真实业务里,情况会变成:
每天几万次客服问答 每天几十万次摘要和分类 每个 Agent 任务消耗大量上下文 RAG 每次都要塞入文档片段 工具调用会产生多轮请求 失败重试会继续吃 token这时候成本会迅速放大。
尤其是 Agentic AI 场景,消耗的不只是一次问答,而是一串动作:
用户提出目标 ↓ 模型规划 ↓ 读取文件 / 搜索 / 调工具 ↓ 模型分析工具结果 ↓ 继续调用工具 ↓ 生成最终答案一次任务可能不是 2K token,而是 200K、500K,甚至更多。
所以模型成本正在从“可忽略的 API 费用”变成“影响产品毛利和架构设计的核心变量”。
这也是 GLM、DeepSeek、Qwen、Kimi 这类低成本模型被重新讨论的原因。
二、价格差距到底有多大
价格会经常变化,下面只做截至 2026-07-12 的参考,实际项目必须以官方价格页为准。
| 模型 / 服务 | 输入价格 | 输出价格 | 备注 |
|---|---|---|---|
OpenAIgpt-5.5 | $5 / 1M tokens | $30 / 1M tokens | OpenAI 官方 API 标准短上下文价格 |
| Anthropic Claude Fable 5 | $10 / 1M tokens | $50 / 1M tokens | Anthropic 官方 API 价格 |
DeepSeekdeepseek-v4-flash | $0.14 / 1M tokens,缓存命中 $0.0028 | $0.28 / 1M tokens | DeepSeek 官方 API 价格 |
DeepSeekdeepseek-v4-pro | $0.435 / 1M tokens,缓存命中 $0.003625 | $0.87 / 1M tokens | DeepSeek 官方 API 价格 |
| GLM-5.2 | 公开报道约 $1.40 / $4.40 | 公开报道口径 | 以 Z.ai / 托管平台价格为准 |
| Qwen 系列 | 价格因模型和平台变化 | 价格因模型和平台变化 | 阿里云百炼提供 qwen3.7-max、qwen3.7-plus、qwen3.6-flash 等 |
| Kimi 系列 | 价格因模型和平台变化 | 价格因模型和平台变化 | Kimi 更突出长上下文、代码和 Agent 能力 |
单看价格,DeepSeek-V4-Flash 的确非常激进。以 OpenAIgpt-5.5标准价格做粗略对比:
输入:$5 vs $0.14,大约 35.7 倍 输出:$30 vs $0.28,大约 107 倍如果输入能大量命中缓存,差距还会更夸张。
但这里有一个关键提醒:
便宜不等于总成本一定低。因为总成本还取决于:
- 一次任务要跑几轮
- 是否容易失败重试
- 输出是否冗长
- 上下文是否能缓存
- 延迟是否导致并发资源浪费
- 质量是否需要人工返工
- 是否需要再调用更强模型复核
所以模型选择不能只看价格表。
三、便宜模型为什么能便宜
低成本模型不是凭空便宜。常见原因有几类。
1. MoE 架构降低单次激活成本
很多新模型采用 Mixture-of-Experts,也就是 MoE 架构。
简单理解:
总参数很多 但每次推理只激活一部分参数例如一些 1T 参数量级模型,单次请求可能只激活几十 B 参数。这样既能保留大模型容量,又能降低推理成本。
Kimi K2 技术报告中就强调了 1T 总参数、32B 激活参数的 MoE 思路。
2. 长上下文推理做了专门优化
长上下文很贵,因为输入 token 多,KV Cache 压力大。
GLM-5 系列在技术报告和项目说明里强调了面向长上下文和长周期 Agent 任务的优化。GLM-5.2 项目页也提到 1M token 上下文、长周期任务和稀疏注意力优化。
Kimi 背后的 Mooncake 架构则从 KV Cache 调度和 prefill / decode 分离角度优化长上下文服务。
这些优化不是概念,对成本很关键。
因为很多 Agent 和 RAG 应用的成本主要花在:
长输入 历史对话 工具结果 文档片段 系统提示词而不只是最终回答。
3. 缓存价格极低
DeepSeek 的价格表里缓存命中输入 token 价格非常低。
这对以下场景很重要:
- 固定系统提示词
- 固定工具描述
- 固定知识库上下文
- 长对话反复追问
- Agent 多轮执行
如果架构设计得好,大量重复上下文可以通过缓存降低成本。
4. 国内云服务价格竞争激烈
模型能力之外,云服务、算力、补贴、市场竞争也会影响价格。
低价本身不一定说明技术绝对领先,但它确实会改变开发者选择:
当一次调用便宜 10 倍甚至 100 倍时,很多原来不敢上线的场景会重新变得可行。四、不能只看每百万 token 单价
模型成本至少应该拆成下面几个部分:
总成本 = 输入 token 成本 + 输出 token 成本 + 缓存写入成本 + 缓存读取成本 + 工具调用成本 + 检索 / 向量 / 存储成本 + 失败重试成本 + 人工返工成本 + 延迟带来的并发成本很多项目只算了前两项:
input token + output token这会低估真实成本。
1. Agent 任务特别容易超预算
2026 年关于 Agentic Coding token 消耗的研究指出,Agentic Coding 任务比普通代码问答消耗高得多,而且同一任务多次运行的 token 消耗差异可能非常大。
这说明 Agent 成本不是稳定常数,而是随机变量。
同一个 Issue:
第一次 80K token 第二次 300K token 第三次 1.5M token都可能发生。
所以 Agent 系统必须设置:
- 单任务预算
- 最大轮数
- 最大工具调用次数
- 最大上下文长度
- 失败熔断
- 高成本模型升级条件
2. 长上下文不一定值得一次性塞满
很多人看到 1M context,就想把所有文档都塞进去。
这通常不是好设计。
更合理的是:
先检索 再压缩 再喂给模型 最后必要时补充上下文否则再便宜的模型,也会被无效上下文拖垮。
3. 输出冗长也会吃掉预算
很多模型喜欢长篇回答。
在高频业务中,输出成本同样重要。
建议通过 Prompt 明确:
最多输出 300 字 只输出 JSON 不要重复用户问题 不要写解释过程对分类、抽取、路由这类任务,输出越短越好。
五、哪些场景适合低成本模型
低成本模型最适合高频、低风险、可验证的任务。
1. 文本分类
例如:
客服问题分类 工单优先级判断 内容标签生成 用户意图识别 舆情情绪分类这些任务输出短、可评测、可回滚,非常适合低成本模型。
2. 信息抽取
例如:
从合同中抽取甲方、乙方、金额、日期 从人员档案中抽取部门、职责、项目记录 从发票中抽取金额、税号、发票号只要有校验规则,低成本模型就很实用。
3. 初筛和预处理
例如:
先判断问题是否需要人工处理 先判断文档是否相关 先生成候选摘要 先压缩长上下文强模型可以放在最后一步,低成本模型负责前面 80% 的粗处理。
4. RAG 问答中的简单问题
如果用户问题可以从检索片段直接回答,不需要复杂推理,可以用便宜模型。
例如:
制度中报销上限是多少? 某个接口参数叫什么? 文档里第 3 步是什么?5. 批量内容生产草稿
例如:
商品描述初稿 短视频脚本初稿 文章摘要 邮件草稿 客服回复草稿最终由人或更强模型审核即可。
六、哪些场景不建议直接替换
1. 高风险决策
例如:
法律判断 医疗建议 金融投资建议 风控拒绝决策 安全漏洞修复方案 生产事故处置这些场景不能只看便宜。
模型便宜 100 倍,但一次错误造成的损失可能远超调用成本。
2. 复杂代码修改
低成本模型可以做:
解释代码 补测试 简单修 bug 生成脚手架但复杂跨模块改造、架构重构、安全逻辑修改,不建议只靠便宜模型完成。
可以采用:
低成本模型生成初稿 强模型复核 人类最终 Review3. 强一致结构化输出
如果模型必须输出严格 JSON、SQL、配置文件,并且容错率很低,就要认真评估。
不是便宜模型不能做,而是必须配合:
- JSON Schema
- 重试修复
- 解析校验
- 单元测试
- 规则兜底
4. 数据合规要求高的场景
涉及:
个人隐私 金融数据 医疗数据 商业机密 源代码 客户合同模型选择不仅是技术问题,也是合规和供应链问题。
应该考虑:
- 数据是否出境
- 是否用于训练
- 日志保留策略
- 是否支持私有化
- 是否支持企业合规审计
- 是否有可用 SLA
七、模型路由:比“选一个模型”更重要
成熟系统不应该只绑定一个模型。
更合理的结构是:
用户请求 ↓ 任务分类 ↓ 低成本模型尝试 ↓ 置信度判断 ↓ 必要时升级到强模型 ↓ 输出校验 ↓ 记录成本和质量1. 按任务分层
可以设计成:
| 任务类型 | 推荐模型层级 |
|---|---|
| 分类、标签、简单抽取 | 低成本模型 |
| 普通问答、摘要、改写 | 中等模型 |
| 复杂推理、代码规划 | 强模型 |
| 高风险决策 | 强模型 + 人工审核 |
| 批处理离线任务 | 低成本模型 + Batch |
| 长上下文检索 | 支持长上下文和缓存的模型 |
2. 按失败风险升级
低成本模型不是不能用,而是要有升级机制。
例如:
低成本模型输出 JSON ↓ JSON 校验失败 ↓ 自动重试一次 ↓ 仍失败则升级强模型或者:
低成本模型回答 ↓ 置信度低 / 引用不足 / 用户追问 ↓ 升级强模型3. 按用户价值分层
不是所有用户请求都值得用最贵模型。
例如:
免费用户:低成本模型 付费用户:中高模型 企业用户:强模型 + 数据隔离 内部批处理:低成本模型 + 异步这不是“降级体验”,而是正常的成本治理。
4. 一个模型路由配置示例
可以用 YAML 描述模型策略:
models:cheap:provider:deepseekmodel:deepseek-v4-flashmax_cost_usd_per_1m_input:0.14max_cost_usd_per_1m_output:0.28balanced:provider:qwenmodel:qwen3.7-pluscoding:provider:glmmodel:glm-5.2premium:provider:openaimodel:gpt-5.5routes:classify:primary:cheapfallback:balancedextract_json:primary:cheapfallback:balancedvalidate:json_schemacode_review:primary:codingfallback:premiumhigh_risk_answer:primary:premiumrequire_human_review:true这比在代码里写死模型名更容易维护。
八、一个无依赖成本估算脚本
下面给一个 Node.js 版本的成本估算脚本,不依赖第三方库。它适合做文章示例,也适合改造成团队内部成本表。
新建llm_cost_calculator.js:
constmodels={"openai-gpt-5.5":{inputPerM:5.00,cachedInputPerM:0.50,outputPerM:30.00,},"anthropic-fable-5":{inputPerM:10.00,cachedInputPerM:1.00,outputPerM:50.00,},"deepseek-v4-flash":{inputPerM:0.14,cachedInputPerM:0.0028,outputPerM:0.28,},"deepseek-v4-pro":{inputPerM:0.435,cachedInputPerM:0.003625,outputPerM:0.87,},"glm-5.2-reported":{inputPerM:1.40,cachedInputPerM:1.40,outputPerM:4.40,},};functionestimateCost({model,requests,inputTokensPerRequest,outputTokensPerRequest,cacheHitRate=0,retryRate=0,}){constprice=models[model];if(!price){thrownewError(`Unknown model:${model}`);}constrequestMultiplier=1+retryRate;consttotalRequests=requests*requestMultiplier;constcachedInputTokens=totalRequests*inputTokensPerRequest*cacheHitRate;constnormalInputTokens=totalRequests*inputTokensPerRequest*(1-cacheHitRate);constoutputTokens=totalRequests*outputTokensPerRequest;constinputCost=(normalInputTokens/1_000_000)*price.inputPerM;constcachedInputCost=(cachedInputTokens/1_000_000)*price.cachedInputPerM;constoutputCost=(outputTokens/1_000_000)*price.outputPerM;return{model,totalRequests,normalInputTokens:Math.round(normalInputTokens),cachedInputTokens:Math.round(cachedInputTokens),outputTokens:Math.round(outputTokens),inputCost:Number(inputCost.toFixed(4)),cachedInputCost:Number(cachedInputCost.toFixed(4)),outputCost:Number(outputCost.toFixed(4)),totalCost:Number((inputCost+cachedInputCost+outputCost).toFixed(4)),};}constscenario={requests:100000,inputTokensPerRequest:2000,outputTokensPerRequest:500,cacheHitRate:0.3,retryRate:0.05,};for(constmodelofObject.keys(models)){console.log(estimateCost({model,...scenario}));}运行:
nodellm_cost_calculator.js示例场景:
10 万次请求 每次输入 2000 tokens 每次输出 500 tokens 缓存命中 30% 失败重试 5%这个脚本想表达的不是“价格永远如此”,而是让你建立一种成本意识:
同样的业务量,不同模型的月成本可能差几十倍。在真实项目里,建议把模型价格放进配置文件,而不是写死在代码里。
九、如何做质量评测
便宜模型能不能用,最终要看评测。
不要只看榜单,也不要只看一次对话体验。
1. 建自己的小型评测集
每个项目都应该准备 50 到 300 条真实样本。
例如客服场景:
用户问题 标准分类 标准答案要点 是否需要人工 风险等级例如代码场景:
Issue 描述 期望修改点 相关测试 不允许修改的文件 人工参考答案2. 评测指标要按任务设计
不同任务指标不同。
| 任务 | 指标 |
|---|---|
| 分类 | 准确率、召回率、混淆矩阵 |
| 抽取 | 字段准确率、JSON 合法率 |
| 摘要 | 事实错误率、遗漏率 |
| RAG | 引用命中率、幻觉率 |
| 代码 | 测试通过率、diff 大小、安全问题 |
| 客服 | 解决率、转人工率、投诉率 |
3. 计算性价比,而不是单看质量
可以用一个简单指标:
性价比 = 可接受样本数 / 成本或者:
单位成本有效答案数 = 通过评测的回答数量 / 总调用费用有时一个模型质量略低,但成本低 20 倍,综合性价比反而更高。
4. 做分层评测
不要只问“哪个模型最好”。
应该问:
简单任务谁最划算? 中等任务谁最稳定? 复杂任务谁最可靠? 哪个模型最容易输出合法 JSON? 哪个模型在长上下文下最稳? 哪个模型最容易啰嗦导致成本上升?这才是工程评测。
十、自建部署和 API 调用怎么选
GLM、Qwen、Kimi 等模型有不少开源或开放权重版本,很多人会想:
既然模型开放了,是不是自建最省钱?不一定。
1. API 更适合的情况
- 调用量不稳定
- 没有专门运维团队
- 需要快速上线
- 对延迟和 SLA 有平台要求
- 不想维护 GPU
- 不想处理模型升级
API 的优势是省心。
2. 自建更适合的情况
- 调用量大且稳定
- 有 GPU 资源
- 数据不能出内网
- 需要定制模型
- 需要控制推理框架
- 可以接受运维复杂度
自建的优势是控制力。
3. 自建不等于一定便宜
2026 年关于 LLM 基础设施成本估算的研究提醒:自建成本强依赖并发和利用率。
如果 GPU 利用率低,自建可能比 API 更贵。
真实成本包括:
GPU 租赁或采购 显存容量 并发利用率 工程维护 模型量化 KV Cache 监控告警 失败恢复 版本升级 安全隔离所以自建前要先算:
我的请求量能不能把 GPU 跑满? 峰谷差有多大? 是否有稳定批处理任务? 是否有团队维护推理服务?如果没有,API 可能更划算。
十一、合规、安全和供应链风险
低成本模型进入企业,不只是价格问题。
还要考虑:
1. 数据合规
问题包括:
数据是否出境? 服务部署在哪个地区? 请求日志保留多久? 是否用于训练? 是否支持企业协议? 是否支持私有化?2. 服务稳定性
低价平台可能在高峰期出现:
- 限流
- 排队
- 延迟波动
- 模型版本变化
- 返回格式变化
生产环境必须做:
超时 重试 降级 多 Provider 备份 版本锁定 日志监控3. 开放权重的安全风险
开放权重是双刃剑。
优点:
可自建 可审计 可微调 可离线 可降低供应商绑定风险:
可能被滥用 安全护栏可被移除 企业需要自己承担部署和安全责任 模型来源和版本要管理尤其是代码生成、网络安全、Agent 工具调用场景,不能只看模型能力。
十二、个人开发者和小团队的推荐路线
如果你是个人或小团队,可以按下面路线走。
第 1 步:先选低成本模型做默认模型
例如:
分类、摘要、抽取、普通问答 → DeepSeek / Qwen / Kimi / GLM 中选一个便宜稳定的先把调用链跑起来。
第 2 步:保留强模型作为 fallback
不要一开始就完全替换。
建议:
低成本模型失败 ↓ 强模型兜底 ↓ 记录失败原因 ↓ 后续优化 prompt 或路由第 3 步:先做成本日志
每次请求记录:
model input_tokens output_tokens cache_hit_tokens latency success retry_count estimated_cost task_type没有日志,就没有优化。
第 4 步:每周看一次模型报表
至少看:
- 哪类任务最花钱
- 哪个模型失败率最高
- 哪个模型输出最长
- 哪些请求没有必要用强模型
- 哪些请求重试太多
第 5 步:把 Prompt 也当成本优化对象
很多成本不是模型贵,而是 Prompt 写得浪费。
例如:
系统提示词太长 工具描述太啰嗦 RAG 塞入太多无关片段 输出格式没有限制 历史对话没有压缩优化 Prompt 往往比换模型更直接。
十三、总结
GLM、Qwen、DeepSeek、Kimi 这类低成本模型带来的最大变化,不是简单的“谁打败谁”,而是让 AI 应用的经济模型发生变化。
过去很多场景因为成本太高,只能做 Demo。
现在可以认真考虑:
高频客服 批量文档处理 RAG 知识库 代码初筛 工单分类 办公自动化 Agent 预处理但便宜模型不是万能答案。
真正成熟的做法是:
低成本模型处理高频简单任务 中等模型处理普通复杂任务 强模型处理高风险和高难任务 人工审核守住关键边界 成本日志持续优化路由策略未来的大模型应用,不会是一个模型包打天下,而会更像数据库、缓存和消息队列一样:
根据任务选择合适组件 根据成本设计架构 根据质量反馈持续调优所以,与其问:
便宜模型能不能替代 OpenAI / Claude?不如问:
我的系统里,有多少任务根本不需要最贵模型?这个问题,才是低成本模型真正带来的工程价值。
参考资料
- DeepSeek API Models & Pricing:https://api-docs.deepseek.com/quick_start/pricing/
- OpenAI API Pricing:https://platform.openai.com/docs/pricing
- Anthropic Claude Pricing:https://docs.anthropic.com/en/docs/about-claude/pricing
- 阿里云百炼模型大全:https://help.aliyun.com/zh/model-studio/models
- GLM-5 GitHub:https://github.com/zai-org/GLM-5
- GLM-5 技术报告:https://arxiv.org/abs/2602.15763
- Kimi K2: Open Agentic Intelligence:https://arxiv.org/abs/2507.20534
- How Do AI Agents Spend Your Money?:https://arxiv.org/abs/2604.22750
- Beyond Per-Token Pricing: A Concurrency-Aware Methodology for LLM Infrastructure Cost Estimation:https://arxiv.org/abs/2606.11690
- TechRadar 关于 GLM-5.2 价格和网页设计评测的报道:https://www.techradar.com/pro/chinas-answer-to-claudes-fable-5-comes-top-of-the-html-web-design-contest-as-the-ceo-tells-elon-musk-glm-will-reach-mythos-class-before-q1-2027