跳到主要内容
01 AI 奇偶aiqo.top
大模型 6 分钟阅读

RAG 还是长上下文?企业知识库的技术选型

上下文窗口扩展到百万 token 之后,检索增强还有必要吗?

AI 奇偶 · 配图

「上下文窗口都百万 token 了,RAG 是不是该淘汰了?」——这可能是今年企业知识库选型中被问得最多的问题。答案比想象中复杂。

支持长上下文一方的理由很直接:把全部资料塞进窗口,模型自己「阅读理解」,省去切块、索引、检索的整条工程链路,召回逻辑也从「猜测相关」变成「全文可见」。

但成本与性能的现实很快泼来冷水:长上下文的推理成本随 token 数线性甚至超线性增长,且存在「中间遗忘」——位于上下文中部的关键信息容易被忽略。对企业级百万文档的库,全量塞入既不经济也不可靠。

检索决定「看什么」,长上下文决定「怎么看」。

实践中的共识是混合架构:用检索缩小范围(成本可控、可溯源),用长上下文保证深度(召回段落的完整语境)。检索决定「看什么」,长上下文决定「怎么看」。

选型的真正问题不是二选一,而是你的场景更在意哪一端:高频问答场景优化检索精度,复杂分析场景放宽上下文预算,而合规要求严格的行业,可溯源的 RAG 链路依然不可替代。

◎ 本文要点

#大模型 #推理成本 #技术选型
01

AI 奇偶编辑部

关注前沿科技,只写值得读的内容 · 2025-10-15

返回列表

← 上一篇

世界模型研究进展:让 AI 理解物理规律

下一篇 →

开发者调查:AI 工具已进入主流工作流

相关阅读

开源社区

开发者调查:AI 工具已进入主流工作流

大模型

开源智能体框架生态观察:从工具调用到自主规划

大模型

多模态大模型推理成本半年下降 80%