大模型拯救世界|理论09|reranker-models,大模型入门到精通,收藏这篇就足够了!

Rag中的精排reranker 在rag应用中,随着文档数量的增加,召回准确率会下降,主要原因是文档数量增加,会导致切分后的chunk区分度下降,不管是稀疏检索还是稠密检索,chunk和query的相似度分数难以区分开。为了解决以上问题,一般会引入reranker,初步召回时先召回比较多的chunk,比如top 20或top 50,然后再对其进行精排,即reranker。以下是网易rag应用QAnything中的数据,当chunk数据超过60万之后,一阶段召回的准确率就会明显下降,使用reranker才能继续提高召回准确率。 阅读详情

大模型拯救世界|理论09|reranker-models

Reranker 模型 = 检索流程里的“质检员”
它把第一阶段(向量/关键词)粗排召回的几十~几百条候选,再逐条“深度面试”,重新算一遍相关性,把真正最相关的顶到前面。

🧬 技术公式(10 秒看懂)

阶段输入输出公式
Embedding(粗排)Query、Doc 分别编码两个向量sim(q,d)=q·d
Reranker(精排)Query+Doc 拼一起编码一个 0-1 分score=σ(Transformer([CLS] q [SEP] d [SEP]))
  • Embedding

    :双塔(Bi-Encoder),快、可离线,适合百万级库。

  • Reranker

    :交叉编码器(Cross-Encoder),慢、更准,只排 Top-k。


🏆 代表模型

名称特点场景
BGE-Reranker中英双语、轻量 0.4 B代码/文档检索
Jina-Reranker支持 8 k 上下文、API 即开即用企业知识库
monoT5T5 微调,MS MARCO 榜常客通用搜索
Qwen3-Reranker-0.6BLLM 风格二分类 yes/no,显存省本地部署

🚦 使用范式(3 步)

  1. 粗召回

    :用 Embedding 从 100 万条里秒出 Top-100。

  2. 精排序

    :用 Reranker 对这 100 条逐条打分,重排。

  3. 送入 LLM

    :把 Top-5 作为上下文,生成最终答案。


🎓 实战代码(HuggingFace)

123456789101112
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch

tok = AutoTokenizer.from_pretrained("BAAI/bge-reranker-base")
model = AutoModelForSequenceClassification.from_pretrained("BAAI/bge-reranker-base")
model.eval()

pairs = [("什么是LLM", "LLM 是大型语言模型..."), 
         ("什么是LLM", "LLM 也指法律硕士...")]
inputs = tok(pairs, padding=True, truncation=True, return_tensors="pt")
with torch.no_grad():
    scores = model(**inputs).logits.squeeze()

⚖️ 优缺点速览

优点缺点
精度明显优于纯向量检索延迟高(每对一次前向)
可插拔,不改原架构显存占用随候选线性增长
支持长上下文/复杂语义需 GPU,并发需排队

✅ 何时用 Reranker?

  • 对准确率敏感

    :法律、医疗、金融问答

  • 候选不多

    :Top-100 以内再精排

  • 成本可接受

    :GPU 延迟 < 500 ms

一句话总结:

Reranker 是用“慢工出细活”的方式,把好答案从一堆候选里挑出来,让 RAG 或搜索引擎的“最后一英里”体验质变。

想入门 AI 大模型却找不到清晰方向?备考大厂 AI 岗还在四处搜集零散资料?别再浪费时间啦!2025 年 AI 大模型全套学习资料已整理完毕,从学习路线到面试真题,从工具教程到行业报告,一站式覆盖你的所有需求,现在全部免费分享!

👇👇扫码免费领取全部内容👇👇

​

一、学习必备:100+本大模型电子书+26 份行业报告 + 600+ 套技术PPT,帮你看透 AI 趋势

想了解大模型的行业动态、商业落地案例?大模型电子书?这份资料帮你站在 “行业高度” 学 AI:

1. 100+本大模型方向电子书

在这里插入图片描述

2. 26 份行业研究报告:覆盖多领域实践与趋势

报告包含阿里、DeepSeek 等权威机构发布的核心内容,涵盖:

  • 职业趋势:《AI + 职业趋势报告》《中国 AI 人才粮仓模型解析》;
  • 商业落地:《生成式 AI 商业落地白皮书》《AI Agent 应用落地技术白皮书》;
  • 领域细分:《AGI 在金融领域的应用报告》《AI GC 实践案例集》;
  • 行业监测:《2024 年中国大模型季度监测报告》《2025 年中国技术市场发展趋势》。

3. 600+套技术大会 PPT:听行业大咖讲实战

PPT 整理自 2024-2025 年热门技术大会,包含百度、腾讯、字节等企业的一线实践:

在这里插入图片描述

  • 安全方向:《端侧大模型的安全建设》《大模型驱动安全升级(腾讯代码安全实践)》;
  • 产品与创新:《大模型产品如何创新与创收》《AI 时代的新范式:构建 AI 产品》;
  • 多模态与 Agent:《Step-Video 开源模型(视频生成进展)》《Agentic RAG 的现在与未来》;
  • 工程落地:《从原型到生产:AgentOps 加速字节 AI 应用落地》《智能代码助手 CodeFuse 的架构设计》。

二、求职必看:大厂 AI 岗面试 “弹药库”,300 + 真题 + 107 道面经直接抱走

想冲字节、腾讯、阿里、蔚来等大厂 AI 岗?这份面试资料帮你提前 “押题”,拒绝临场慌!

1. 107 道大厂面经:覆盖 Prompt、RAG、大模型应用工程师等热门岗位

面经整理自 2021-2025 年真实面试场景,包含 TPlink、字节、腾讯、蔚来、虾皮、中兴、科大讯飞、京东等企业的高频考题,每道题都附带思路解析:

2. 102 道 AI 大模型真题:直击大模型核心考点

针对大模型专属考题,从概念到实践全面覆盖,帮你理清底层逻辑:

3. 97 道 LLMs 真题:聚焦大型语言模型高频问题

专门拆解 LLMs 的核心痛点与解决方案,比如让很多人头疼的 “复读机问题”:


三、路线必明: AI 大模型学习路线图,1 张图理清核心内容

刚接触 AI 大模型,不知道该从哪学起?这份「AI大模型 学习路线图」直接帮你划重点,不用再盲目摸索!

在这里插入图片描述

路线图涵盖 5 大核心板块,从基础到进阶层层递进:一步步带你从入门到进阶,从理论到实战。

img

L1阶段:启航篇丨极速破界AI新时代

L1阶段:了解大模型的基础知识,以及大模型在各个行业的应用和分析,学习理解大模型的核心原理、关键技术以及大模型应用场景。

img

L2阶段:攻坚篇丨RAG开发实战工坊

L2阶段:AI大模型RAG应用开发工程,主要学习RAG检索增强生成:包括Naive RAG、Advanced-RAG以及RAG性能评估,还有GraphRAG在内的多个RAG热门项目的分析。

img

L3阶段:跃迁篇丨Agent智能体架构设计

L3阶段:大模型Agent应用架构进阶实现,主要学习LangChain、 LIamaIndex框架,也会学习到AutoGPT、 MetaGPT等多Agent系统,打造Agent智能体。

img

L4阶段:精进篇丨模型微调与私有化部署

L4阶段:大模型的微调和私有化部署,更加深入的探讨Transformer架构,学习大模型的微调技术,利用DeepSpeed、Lamam Factory等工具快速进行模型微调,并通过Ollama、vLLM等推理部署框架,实现模型的快速部署。

img

L5阶段:专题集丨特训篇 【录播课】

img
四、资料领取:全套内容免费抱走,学 AI 不用再找第二份

不管你是 0 基础想入门 AI 大模型,还是有基础想冲刺大厂、了解行业趋势,这份资料都能满足你!
现在只需按照提示操作,就能免费领取:

👇👇扫码免费领取全部内容👇👇

​

2025 年想抓住 AI 大模型的风口?别犹豫,这份免费资料就是你的 “起跑线”!

【AI知识点】重排序器(Re-ranker) 重排序器(Re-ranker) 是信息检索系统中用于对初步检索结果进行进一步排序的关键组件。它通过更复杂的模型(如机器学习、深度学习或基于规则的模型)对初步结果进行优化,确保用户得到更精确的结果。重排序器广泛应用于搜索引擎、问答系统、推荐系统和广告系统中,能够有效提高系统的相关性和用户满意度。 阅读详情

相关推荐

Reranker:使用深度语言模型构建文本重审器

重整器 Reranker是一种轻量级,有效且高效的软件包,用于在信息检索(IR),问题解答(QA)和许多其他自然语言处理(NLP)管道中训练和部署深度语言模型Reranker。 培训过程遵循我们的ECIR论文使用局部对比模拟(LCE)损失。 Reranker说话的拥抱脸 :hugging_face: 语! 这意味着,一旦将所有最新的预训练模型移植到HF变压器,您就可以立即获得它们。 您还将获得熟悉的模型和培训师界面。 艺术表演舞台。 Reranker向MS MARCO文档排行榜提交了两份意见书。 每个人都获得了第一名,推进了SOTA! 日期 提交名称 开发人员MRR @ 100 评估MRR @ 100 2021/01/20 LCE损失+ HDCT(整体) 0.464 0.405 2020/09/09 HDCT top100 +基于BERT的FirstP(单个) 0.434 0.382 特征

RAG优化神器:rerankers重新排名模型的终极方案,提供轻量级统一API

Reranker 是对初步检索出的候选文档集进行重新排序的模型或算法。它在初始检索(通常基于简单的匹配算法,如 TF-IDF、BM25 或 Dense Embedding)之后,对结果进行二次处理,确保最相关的内容排在前面。Reranker 通常利用更复杂的语义理解和深度模型,比如 BERT 或其他 Transformer 模型,来更好地衡量候选文档与查询之间的相关性。

m0_59235945的博客 8135

【ESP32开发】——开发环境搭建(VSCode+PlatformIO)

本章内容主要介绍ESP32的开发环境搭建(基于VSCode+PlatformIO)的流程与相应的注意事项,避免开发ESP32止于环境搭建!在项目的维护过程中,可以更好地管理和更新代码、调试问题,并且能够快速适应和采用新的功能、库或硬件平台。:VSCode 的代码提示和自动补全功能,以及 PlatformIO 的管理工具,都能帮助你编写规范、格式良好且易于阅读的代码。:Arduino 框架是一种简单、易用的嵌入式开发框架,适用于快速原型开发和小型项目。需要选择对应自己开发的开发板型号。

m0_61934621的博客 8417

RAG检索增强之Reranker重排序模型详解!

ReRanker模型是对RAG检索返回的结果进行重新排序的模型。也就是下图所示中2nd Retrieval的模型。具体来说,ReRanker模型在RAG Pipeline中扮演着第二阶段的角色,即在初始检索步骤之后,对检索出的文档块chunks进行重新排序,以确保相关的文档块优先被传递给LLM进行处理。

xx_nm98的博客 9190

ZYNQ AXI DMA零拷贝实战:用mmap在用户空间玩转高速数据流(基于Petalinux 2020.2)

本文详细介绍了在ZYNQ平台上使用AXI DMA和mmap技术实现零拷贝数据传输的实战方法。基于Petalinux 2020.2环境,通过内核配置、设备树修改和用户空间库设计,大幅提升PS与PL之间的数据传输效率,特别适用于高清视频流、高速AD采样等高性能场景。

weixin_27956639的博客 365

Circos图审美拯救计划:用TBtools复刻Nature级共线性分析图谱

本文针对Circos图在共线性分析中的审美提升问题,提供了一套基于TBtools的完整优化方案。通过构建和谐的色彩体系、精细控制信息层布局以及模仿顶刊构图逻辑,详细讲解了如何从配色、透明度、标签显示到高级参数设置,将默认图表升级为具有高级学术美感的Nature级图谱,助力研究者提升论文图表质量。

cherry的博客 911

深入理解Rerank(重排名)技术核心知识点

有一些专门用于做Rerank的大模型,比如适用于中英文双语rerank场景。rerank 模型的效果排名可以参考 MTEB 排行榜。与embedding模型不同,reranker使用问题和文档作为输入,直接输出相似度而不是embedding。reranker是基于交叉熵损失进行优化的,因此相关性得分不受特定范围的限制。

秃了也弱了 4946

Python_构建同花顺问财智能选股API服务

本文详细介绍了如何使用Python构建同花顺问财智能选股API服务,涵盖从环境准备、核心API开发到高级功能扩展的全过程。通过Flask框架和pywencai库,开发者可以快速搭建稳定可靠的选股接口,实现自动化股票筛选与交易系统集成,提升量化投资效率。

weixin_30596343的博客 333

必收藏!Reranker模型详解:解决RAG检索痛点的核心组件

Reranker模型,顾名思义,是对RAG流程中初始检索返回的文档结果进行二次排序的专用模型,对应RAG Pipeline中“二次检索(2nd Retrieval)”的核心环节。在实际应用中,RAG先通过向量数据库等工具检索出一批文档块(chunks),而Reranker的核心作用就是对这些初步结果做“优中选优”,将与用户查询最相关的文档块优先传递给LLM,过滤冗余低效信息。

大模型研究中心 1707

【微知】关于GB200 NVL72服务器的一些信息?(36CPU72GPU;LPDDR5X 17T;HBM3e 13.5T;5代NVlink 1.8TB; 720P算力FP8;120Kw)

本文仅根据官网介绍分析,存在纰漏仅供参考。

技术札记 5387

半导体制造技术导论(第二版)萧宏 第五章集成电路加热工艺答案

第二次退火是在较高温度下进行,并将电阻系数较高的c49碳化硅转变为电阻系数较低的c54碳。水平式高温炉加热、垂直式高温炉加热(即传统的管式炉加热)、快速加热工艺RTP、激光镭射。8. 集成电路芯片制造过程中,会使用垫底氧化层、阻挡氧化层、栅氧氧化层、屏蔽氧化层和全。氧化是最重要的加热过程之一,是一种添加工艺,将氧气加入到硅晶圆后,在晶圆表面形成二氧。为了满足元器件性能的要求,必须利用退火工艺将晶格的损伤修复,使其恢复单晶结构并激活掺。工艺氮气气流下将晶舟推入炉管,升高温度,稳定温度;

goal_achieving的博客 1864

提高 RAG 应用准确度,时下流行的 Reranker 了解一下?

这是因为重排过程需要对每个候选文档进行高成本的模型推理,不同于前者可以每次查询都复用离线索引的结果,使用 Reranker 需要每次在线查询都进行推理,结果无法复用,带来重复的开销。虽然 Reranker 的使用成本远高于单纯使用向量检索的成本,但它仍然比使用 LLM 为同等数量文档生成答案的成本要低。在 RAG 架构中,Reranker 可以筛选向量搜索的初步结果,丢弃掉与查询相关性低的文档,从而有效防止 LLM 处理无关信息,相比于将向量搜索返回的结果全部送进 LLM 可大大减少生成部分的耗时和成本。

ZILLIZ 6028

Qt(C++)使用QChart动态显示3个设备的温度变化曲线

Qt的QChart是一个用于绘制图表和可视化数据的类。提供了一个灵活的、可扩展的、跨平台的图表绘制解决方案,可以用于各种应用程序,如数据分析、科学计算、金融交易等。

1917

基于Reranker方法增强RAG的检索效果

Reranker 是信息检索(IR)生态系统中的一个重要组成部分,用于评估搜索结果,并进行重新排序,从而提升查询结果相关性。在 RAG 应用中,主要在拿到向量查询(ANN)的结果后使用 Reranker,能够更有效地确定文档和查询之间的语义相关性,更精细地对结果重排,最终提高搜索质量。目前,Reranker 类型主要有两种基于统计的 Reranker 会汇总多个来源的候选结果列表,使用多路召回的加权得分或倒数排名融合(RRF)算法来为所有结果重新算分,统一将候选结果重排。

qq_65019236的博客 2460

Python爬虫逆向案例:某云片滑块验证码分析-滑动验证码

今天我们看个滑块。

2201_76125393的博客 1034

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

【RAG实践】Rerank,让大模型 RAG 更近一步

近几年, 随着深度学习的发展,尤其是预训练语言模型的出现极大的推动了文本表示技术的效果, 基于预训练语言模型的文本表示模型在学术研究数据、工业实际应用中都明显优于传统的基于统计模型或者浅层神经网络的文本表示模型。本文主要关注在Rerank,本文中,Rerank可以在不牺牲准确性的情况下加速LLM的查询(实际上可能提高准确率),Rerank通过从上下文中删除不相关的节点,重新排序相关节点来实现这一点。加载数据后,基于文档对象列表(或节点列表),建设他们的index,就可以方便的检索他们。

2301_78285120的博客 5226

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

【论文】长文档重排

将模块化重排推广到长文档重排,帮助查询交互文档的每一个段落,充分获取文档信息。

elf1110的博客 669

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

假人有限元模型

假人模型,车辆碰撞假人有限元模型,适合做乘员安全的研究者利用

小白也可以轻松学大模型 RAG:FlagEmbedding 重排序

RAG模型已经取得了显著的进展,但其性能仍然受到排序质量的限制。在实践中,我们发现重排序技术能够有效地改善排序的效果,从而进一步提升RAG模型在问答任务中的表现。重排序的作用与传统的嵌入模型不同,重排序器(reranker)直接以问题和文档作为输入,并输出相似度,而不是嵌入。通过将查询和文段输入到重排序器中,您可以获得相关性分数。

2201_75499313的博客 4022

Retrieve, Read, Rerank: Towards End-to-End Multi-Document Reading Comprehension

ACL 2019 Retrieve, Read, Rerank: Towards End-to-End Multi-Document Reading Comprehension github 本文所关注的是阅读理解中的多文档输入问题,即如何根据问题在给定的多个输入文档中找到对应答案的区域。解决此类问题的一种方法便是retriever -> reader -> reranker的pipe...

Forlogenの解忧杂货铺 6392

搜索准确性提升 20%,Jina Reranker 成为 RAG 优化的新标杆!

日前,我们正式发布了 Jina Reranker(jina-reranker-v1-base-en),专为提高搜索准确性打造。Jina Reranker 在多个权威测评中屡获领先,实验数据显示,相比简单 RAG 系统,搭载该模型的检索系统命中率提高 8%,MRR 更是飙升 33%。

Jina AI 的博客 2266

重排序模型(Reranker)完全指南

核心定义重排序模型(Reranker)是一种专门用于改善信息检索和排名质量的模型。它接收一个查询和一组候选文档,对每个文档计算与查询的相关性分数,然后按相关性从高到低重新排序。在RAG(检索增强生成)系统中,重排序模型扮演"质量过滤器"的角色,位于初始检索和最终生成阶段之间。为什么叫"重排序"?使用向量相似度或关键词搜索快速找到相关文档重排序模型对这些候选文档进行精细排序。

weixin_69334636的博客 1238

重排序模型Reranker:颠覆搜索与推荐的AI核心技术揭秘

重排序模型(Reranker)是检索增强生成(RAG)系统中的关键组件,位于初步检索和最终生成之间。它的主要功能是对初步检索到的文档进行更精细的排序,显著提升最终生成结果的质量。想象一下,当你在樱桃园采摘樱桃时,首先会快速收集大量樱桃(初步检索),然后会有一个精细的分拣过程,测量每颗樱桃的直径(相关性)和糖分(内容质量),从大到小排列,剔除小颗粒、酸涩的樱桃(低相关内容)——这就是Reranker在RAG流程中扮演的角色。

weixin_45631123的博客 1010

LLMs之Reranker:训练与微调 Reranker(Cross-Encoder)实战:基于 Sentence Transformers v4 的端到端指南

​ LLMs之Reranker:训练与微调 Reranker(Cross-Encoder)实战:基于 Sentence Transformers v4 的端到端指南—《Training and Finetuning Reranker Models with Sentence Transformers v4》的翻译与解读 目录 《Training and Finetuning Reranker Models with Sentence Transformers v4》的翻译与解读 1. W

头部AI社区如有邀博主AI主题演讲请私信—心比天高,仗剑走天涯,保持热爱,奔赴向梦想!低调,专注,谦虚,自律,反思,成长,还算比较正能量的博主,公益免费传播…内心特别想在AI界做出一些可以推进历史进程影响力的技术(兴趣使然,有点小情怀,也有点使命感呀 2585

从 BGE 到 Qwen3:中文 RAG Reranker 模型解析

在通常的 RAG(检索增强生成)流程中,当用户提出查询请求时,系统首先通过 Embedding 模型对 Query 进行向量化,然后和向量数据库里预存的文档向量进行相似度计算,即从海量候选文档中快速筛选出一批初步相关的文档,这一阶段称为初步检索然而,初步检索结果的相关性往往并不精确,因为 Embedding 模型更擅长捕捉粗粒度的语义相似性,难以准确判断文档与 Query 之间细粒度的语义匹配程度。为此,需要引入一个更精细的排序步骤,即Rerank 模型。

顺其自然~专栏 534

用通俗易懂的方式讲解:大模型 Rerank 模型部署及使用技巧总结

RAG 是一种结合了信息检索和文本生成的语言模型技术。简单来说,当你向大语言模型(LLM)提出一个问题时,RAG 首先会在一个大型的文档集合中寻找相关信息,然后再基于这些信息生成回答。Rerank 的工作就像是一个智能的筛选器,当 RAG 从文档集合中检索到多个文档时,这些文档可能与你的问题相关度各不相同。有些文档可能非常贴切,而有些则可能只是稍微相关或者甚至是不相关的。这时,Rerank 的任务就是评估这些文档的相关性,然后对它们进行重新排序。它会把那些最有可能提供准确、相关回答的文档排在前面。

2301_78285120的博客 2万+

使用大模型检索增强 Rerank 模型,检索效果提升太明显了!

RAG 是一种结合了信息检索和文本生成的语言模型技术。简单来说,当你向大语言模型(LLM)提出一个问题时,RAG 首先会在一个大型的文档集合中寻找相关信息,然后再基于这些信息生成回答。Rerank 的工作就像是一个智能的筛选器,当 RAG 从文档集合中检索到多个文档时,这些文档可能与你的问题相关度各不相同。有些文档可能非常贴切,而有些则可能只是稍微相关或者甚至是不相关的。这时,Rerank 的任务就是评估这些文档的相关性,然后对它们进行重新排序。它会把那些最有可能提供准确、相关回答的文档排在前面。

2201_75499313的博客 7132
上一篇: 大模型拯救世界|理论08|向量索引的本质,大模型入门到精通,收藏这篇就足够了!
下一篇: 大模型拯救世界|理论10|CLIP,大模型入门到精通,收藏这篇就足够了!
Llama-Turbo
博客等级 码龄4年 9901粉丝 2022原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值