收藏!小白程序员必看:轻松掌握RAG核心模型Embedding与Rerank
本文详细介绍了RAG系统中核心的Embedding和Rerank模型。Embedding模型负责将文本向量化以进行相似度检索,而Rerank模型则在检索基础上进一步精确排序,提升相关性。文章从功能目标、应用阶段和技术实现三个维度对比了两种模型,并辅以实例说明,适合初学者和程序员学习大模型基础知识。Embedding和Rerank模型是RAG系统中的核心模型。在RAG系统中,有两个非常重要的模型一个
本文详细介绍了RAG系统中核心的Embedding和Rerank模型。Embedding模型负责将文本向量化以进行相似度检索,而Rerank模型则在检索基础上进一步精确排序,提升相关性。文章从功能目标、应用阶段和技术实现三个维度对比了两种模型,并辅以实例说明,适合初学者和程序员学习大模型基础知识。
“ Embedding和Rerank模型是RAG系统中的核心模型。”
在RAG系统中,有两个非常重要的模型一个是Embedding模型,另一个则是Rerank模型;这两个模型在RAG中扮演着重要角色。
Embedding模型的作用是把数据向量化,通过降维的方式,使得可以通过欧式距离,余弦函数等计算向量之间的相似度,以此来进行相似度检索。
而Rerank的作用是在Embedding检索的基础之上,进行更加准确的数据筛选;如果说Embedding模型进行的是一维筛选,那么Rerank模型就是从多个维度进行筛选。

Embedding模型和Rerank模型
在自然语言处理和信息检索系统中,Embedding模型和Rerank模型是两类功能不同但常结合使用的技术。
Embedding和Rerank模型都是基于深度学习方式实现的神经网络模型,但由于其功能不同,因此其实现方式和训练方法也有一定的区别。
从使用的角度来看,Embedding一般用于数据向量化并快速检索,而Rerank模型是在快速检索的基础之上进行重排序,提升相似度。
但从技术实现的角度来说,两种模型使用的学习方式和架构是不一样的;原因就在于两个模型的实现目的和处理数据的方式。
它们的核心区别在于目标、应用阶段和技术实现。以下是详细对比:
1. 功能目标
| 维度 | Embedding模型 | Rerank模型 |
|---|---|---|
| 核心任务 | 将文本转化为低维向量,捕捉语义信息 | 对候选结果重新排序,提升相关性 |
| 输出形式 | 高维或低维向量(如768维向量) | 候选列表的排序分数(如相关性得分) |
| 关注点 | 文本的全局语义表示 | 候选结果与查询的细粒度匹配 |
示例
- Embedding模型:将“如何训练神经网络?”转换为向量,用于检索相似问题。
- Rerank模型:对初步检索的100个答案排序,将最相关的答案排到前3。
2. 应用阶段
| 维度 | Embedding模型 | Rerank模型 |
|---|---|---|
| 所处流程 | 检索阶段 :快速生成候选集 | 精排阶段 :优化候选集的顺序 |
| 数据规模 | 处理海量数据(如百万级文档) | 处理小规模候选集(如Top 100~1000) |
| 性能要求 | 要求高效(毫秒级响应) | 可接受较高延迟(需复杂计算) |
典型场景
- Embedding模型:用于搜索引擎的初步召回(如从10亿文档中筛选出Top 1000)。
- Rerank模型:在推荐系统中对Top 100结果精细化排序,提升点击率。
3. 技术实现
| 维度 | Embedding模型 | Rerank模型 |
|---|---|---|
| 模型类型 | 无监督/自监督学习(如BERT、Sentence-BERT) | 有监督学习(如Pairwise Ranking、ListNet) |
| 输入输出 | 单文本输入 → 固定维度向量 | 查询+候选文本对 → 相关性分数 |
| 特征依赖 | 仅依赖文本本身的语义信息 | 可融合多特征(语义、点击率、时效性等) |

模型举例
- Embedding模型:
- 通用语义编码:BERT、RoBERTa
- 专用场景:DPR(Dense Passage Retrieval)
- Rerank模型:
- 传统方法:BM25 + 特征工程
- 深度模型:ColBERT、Cross-Encoder
如何学习大模型 AI ?
由于新岗位的生产效率,要优于被取代岗位的生产效率,所以实际上整个社会的生产效率是提升的。
但是具体到个人,只能说是:
“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。
这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。
我在一线科技企业深耕十二载,见证过太多因技术卡位而跃迁的案例。那些率先拥抱 AI 的同事,早已在效率与薪资上形成代际优势,我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在大模型的学习中的很多困惑。我们整理出这套 AI 大模型突围资料包:
- ✅ 从零到一的 AI 学习路径图
- ✅ 大模型调优实战手册(附医疗/金融等大厂真实案例)
- ✅ 百度/阿里专家闭门录播课
- ✅ 大模型当下最新行业报告
- ✅ 真实大厂面试真题
- ✅ 2026 最新岗位需求图谱
所有资料 ⚡️ ,朋友们如果有需要 《AI大模型入门+进阶学习资源包》,下方扫码获取~
① 全套AI大模型应用开发视频教程
(包含提示工程、RAG、LangChain、Agent、模型微调与部署、DeepSeek等技术点)
② 大模型系统化学习路线
作为学习AI大模型技术的新手,方向至关重要。 正确的学习路线可以为你节省时间,少走弯路;方向不对,努力白费。这里我给大家准备了一份最科学最系统的学习成长路线图和学习规划,带你从零基础入门到精通!
③ 大模型学习书籍&文档
学习AI大模型离不开书籍文档,我精选了一系列大模型技术的书籍和学习文档(电子版),它们由领域内的顶尖专家撰写,内容全面、深入、详尽,为你学习大模型提供坚实的理论基础。
④ AI大模型最新行业报告
2025最新行业报告,针对不同行业的现状、趋势、问题、机会等进行系统地调研和评估,以了解哪些行业更适合引入大模型的技术和应用,以及在哪些方面可以发挥大模型的优势。
⑤ 大模型项目实战&配套源码
学以致用,在项目实战中检验和巩固你所学到的知识,同时为你找工作就业和职业发展打下坚实的基础。
⑥ 大模型大厂面试真题
面试不仅是技术的较量,更需要充分的准备。在你已经掌握了大模型技术之后,就需要开始准备面试,我精心整理了一份大模型面试题库,涵盖当前面试中可能遇到的各种技术问题,让你在面试中游刃有余。

以上资料如何领取?

为什么大家都在学大模型?
最近科技巨头英特尔宣布裁员2万人,传统岗位不断缩减,但AI相关技术岗疯狂扩招,有3-5年经验,大厂薪资就能给到50K*20薪!

不出1年,“有AI项目经验”将成为投递简历的门槛。
风口之下,与其像“温水煮青蛙”一样坐等被行业淘汰,不如先人一步,掌握AI大模型原理+应用技术+项目实操经验,“顺风”翻盘!

这些资料真的有用吗?
这份资料由我和鲁为民博士(北京清华大学学士和美国加州理工学院博士)共同整理,现任上海殷泊信息科技CEO,其创立的MoPaaS云平台获Forrester全球’强劲表现者’认证,服务航天科工、国家电网等1000+企业,以第一作者在IEEE Transactions发表论文50+篇,获NASA JPL火星探测系统强化学习专利等35项中美专利。本套AI大模型课程由清华大学-加州理工双料博士、吴文俊人工智能奖得主鲁为民教授领衔研发。
资料内容涵盖了从入门到进阶的各类视频教程和实战项目,无论你是小白还是有些技术基础的技术人员,这份资料都绝对能帮助你提升薪资待遇,转行大模型岗位。

以上全套大模型资料如何领取?

更多推荐



所有评论(0)