小语言模型
Small Language Model
学到 认得 就够:听到能明白
你可能会说
“我电脑资源有限,读文献是不是只能选小模型,它会在哪些地方不合适?”
小语言模型通常指参数和运行资源较少的语言模型。它是一种相对分类,没有统一大小界线,可能靠精选数据、任务适配或蒸馏满足特定需要。
这个产品更新很快,功能和价格以官方最新信息为准。卡片内容核对于 2026-11-06。
使用 AI
科研里的例子
在本机对政策段落做主题预分类,用经人工检验的小模型减少资源消耗,并把疑难段落留给人工复核。
模型大小影响存储和计算,却不是任务表现的唯一决定因素。一个规模较小、专门适配文书分类的模型,可能比未适配的大模型更合用;反过来,复杂跨领域任务仍可能暴露容量局限。比较时应固定任务、输入长度和评价口径,同时记录运行硬件、速度与资源。模型能装进本机只证明部署可行,不能据此声称质量、隐私或维护成本都已解决。
判断
亲手检查一次
为同一批二十段已标注文本比较两个不同规模模型,记录正确、漏判、耗时和内存,避免只看一次演示。
它做不到的
SLM 属相对且变化的产品与研究用语;不能用一个参数阈值永久划线,也不能从“小”推断数据来源安全。
增量,由你来写
读完这张,你的理解变了什么?
留言功能会在后面的版本开放。现在可以先在 X 上 @knowledgedelta 告诉我。
来源
- Abdin 等 · Phi-3 Technical Report2026-11-06 核对
- Hinton 等 · Distilling the Knowledge in a Neural Network2026-11-06 核对
卡片底稿由 AI 协助整理,经过核对;发现错误请告诉我。