白话 AI 小百科
← 返回百科索引
开放与部署 · 30 秒看懂

量化

Quantization

一句人话

用更少的数字精度保存模型,以降低内存和计算需求。

打个比方

把高清原图压成更小文件,尽量保留主要信息。

这个比方用于帮助入门,并不覆盖技术实现的所有细节。

什么时候需要它

让大模型在消费级设备上运行。

先从实际任务理解概念,比死记英文缩写更有效。

别混淆

体积变小可能带来能力损失,且不同量化方法效果不同。

如果这个概念会影响费用、数据或安全,请继续查看官方文档。