RAG 知识库问答系统实践
让 AI 回答公司内部文档的问题——RAG(检索增强生成)是当前最主流的方案,不需要微调模型。 一、RAG 的核心原理 1.1 为什么需要 RAG——大模型的训练数据截止日期问题 1.2 RAG 流程——检索 → 增强 → 生成 1.3 与微调的区别——RAG 是”查资料”,微调是”背下来” 二、文档处理——把文档变成向量 2.1 文档切片——太长会丢失上下文,太短会丢失连贯性 2.2 Chunk Size 的选择——500-1000 Token 2.3 Overlap——块之间的重叠,防止语义断裂 2.4 文档格式处理——PDF / Word / Markdo...