向量库与搜索常被混,但解不同问题。知用哪个——及何时用两者——是检索系统答与非猜之分。
各做啥
传统搜索索 token,按词叠与结构配查询——快、精、用户知确切措辞时佳。向量库存嵌入,按语义相似检,故“退款政策”可配“如何拿回钱”无共词。 非对手而不同镜:一镜词,一镜意。
关键词胜处
对法律条款、产品 SKU、错误码、或确切术语要紧处,关键词搜索无敌。亦更便宜易审,因匹配透明:术语在文档。 若检索多“找确切物”,你不需向量。加之为无益成本。
向量胜处
对支持答、知识文、或用户以己言问而正源用异词处,向量亮。它捕 token 匹漏的释义意图。正是这使自然语言 Q&A 感智能。 权衡是 opacity:向量配是相似分非可见词,故需重排与出处保可信。
奏效混合
生产检索栈少选一。并行跑关键词与向量,再按相关重排合并候选,引出源。关键词保确切术语精;向量保意召回;重排调和。 这混合是 RAG 事实标准,因捕所说与所意。
治理与成本
向量加嵌入算存,及源变时刷新管。关键词索引更轻。治理杠同——访问控制与出处——但向量需慎,使相似却错段不无重排检而浮。 错在假定向量自动更优。是不同;架构应配查询。
要点速览
- 关键词搜索胜精确确切术语结构化查。
- 向量搜索胜基于意、容释义检索。
- 生产 RAG 用混合:两者加顶层重排。
- 向量加成本且需重排保可信。
落地起点
工具配查询:确切术语要紧处(码、SKU、条款)用关键词,措辞变处(支持、知识)用向量。RAG 并行跑两者,重排合并候选,引出源使相似却错段被抓。
接下来看什么
预期带重排混合检索成 RAG 默认,向量库加原生关键词与重排支持。架构配查询型的团队,将避漏答与自信幻觉。
一条务实路由规则
- 查询是精确标识时用关键词:SKU、错误码、条款——精确胜相似。
- 语义重要时用向量:“找类似这投诉的”或“相似过往事件”,你叫不出字段名时。
- 跑混合让顶部结果合并;用户少在意哪引擎答,只在意答对。
- 两者都治理:限定访问、记每次检索所得,使相关性永不变泄漏。
- 在你自己的语料上基准,而非供应商的,因你的查询不是他们的演示查询。
之争从非向量对搜索,而是何时用哪。交付路由规则的团队——精确查走关键词、相似走向量、边缘合并——拿到相关性而无科学项目,成本可预期,也停下了对用户从不可见的抽象之争。
按问题的形状路由,用户拿到相关性,而无需知道是哪台引擎答的。