分类 抽取 Rerank:小模型最容易落地的三个方向
大模型的高成本常常让团队头痛不已,但小模型在分类、抽取和重排这三类边界清晰的任务上,却展现出更低的成本、更快的速度以及更稳定的效果。以下内容将围绕小模型在实际落地中的独特优势,详细解析分类、抽取与重排的应用场景与原理,并探讨如何串联这三个方向来构建高效的AI应用流水线。

小模型最适合的不是“替代大模型回答所有问题”,而是承担边界清晰、输出稳定、调用高频的基础能力。
过去两年,许多团队接入大模型后都遇到了一个共同问题:大模型效果虽好,但成本、延迟和稳定性未必适用于所有环节。尤其在生产系统中,高频任务往往不是开放式的长文生成,而是分类、抽取、排序、过滤、路由、审核和结构化处理。这些任务的共同特点是输入可以复杂,但输出空间相对可控,因此非常适合用小模型来落地。
如果将AI应用进行拆解,大模型更像是“复杂推理和生成引擎”,而小模型则扮演“数据处理流水线里的专用算子”。其中最容易落地的三个方向是:
- 分类 Classification:判断输入属于哪一类。
- 抽取 Extraction:从文本里提取结构化字段。
- Rerank 重排:对候选内容重新排序,把最相关的放前面。
这篇文章会通过数据流图和工作流图,把这三个方向的原理、方法和落地路径讲清楚。
1. 为什么这三个方向最适合小模型?
小模型的优势并非“无所不能”,而是体现在以下几个方面:
- 便宜:适合高频调用。
- 快:适合在线链路和低延迟场景。
- 稳定:输出格式更容易约束。
- 可训练:少量业务数据就能明显提升。
- 可部署:可以API、自托管、边缘侧或私有化部署。
分类、抽取、Rerank正好符合这些条件。
业务输入: 文本/对话/文档/搜索请求任务类型分类: 判断类别抽取: 生成结构化字段Rerank: 候选重新排序路由/审核/标签/意图识别表单填充/知识入库/风控审查RAG/搜索/推荐/召回优化下游业务系统
这三个方向并非彼此独立。许多真实系统会将它们串联起来:先通过分类判断意图,再抽取关键字段,最后对候选知识或商品进行rerank。
用户输入小模型分类选择业务流程小模型抽取字段检索候选内容小模型 Rerank大模型生成或业务决策
2. 方向一:分类,让模型成为业务流量的路由器
分类是最容易落地的小模型任务。它的目标很简单:给定一段输入,输出一个或多个标签。典型场景包括:
| 场景 | 输入 | 输出 |
|---|---|---|
| 客服意图识别 | 用户问题 | 退款、物流、售后、投诉 |
| 内容审核 | 文章/评论 | 正常、广告、低俗、涉政、辱骂 |
| 工单分派 | 用户反馈 | 产品、技术、财务、运营 |
| 邮件分类 | 邮件正文 | 销售线索、客户投诉、垃圾邮件 |
| Agent 路由 | 用户任务 | 搜索、写作、代码、数据分析 |