大模型开发必看:从传统RAG到智能体RAG,一文掌握AI应用性能提升10倍的秘密武器!

2025反爬终极方案:Python破解Cloudflare v2行为指纹,设备伪装+轨迹模拟拦截率压至1% Cloudflare v2的反爬逻辑越来越接近“人类行为识别”,单纯的技术破解已失效,核心竞争力变成“模拟真实用户的能力”。本文的终极方案本质是“全方位复刻人类行为”——从设备指纹到操作轨迹,从网络特征到交互模式,让爬虫成为“无法被区分的真实用户”。这套方案的优势是“通用性强”,不仅适用于Cloudflare v2,也能破解大多数高反爬网站(如小红书、知乎、跨境电商)的行为检测;且代码可直接复用,新手只需替换目标URL和数据提取逻辑,就能快速落地。 阅读详情

大型语言模型(LLM)的实用性核心在于它们能接触到多少信息。为了突破训练数据的静态限制,行业内发展出了以检索增强生成(Retrieval-Augmented Generation, RAG)为基石的一系列技术。

RAG通过连接外部知识源,显著提升了LLM回答的准确性、时效性和可靠性。然而,随着应用场景的日益复杂,RAG架构也在不断进化,从最初的简单增强,走向了高效压缩和复杂的智能体协作。

传统RAG

传统的RAG架构为LLM提供了一个简单的外部知识通道。当用户提出问题时,流程如下:

  1. 查询与检索: 用户的提示首先被传递到一个检索模块(Search)。

  2. 提取上下文: 该模块会搜索预设的知识源,包括PDF文件、数据库、网页搜索或API等,并提取出最相关的文本片段。

  3. 增强生成: 系统将用户的原始查询与所有检索到的相关文本拼接在一起,形成一个冗长的“增强上下文提示”,然后将其发送给LLM(如GPT、Gemini或Claude)。

  4. 模型响应: LLM基于这个丰富的上下文生成最终答案。

优势在于简单有效,能显著减少模型“幻觉”,将回答锚定在具体事实之上。局限在于其“一刀切”的方法:它将检索到的所有信息一股脑地塞入LLM的上下文窗口,导致提示冗长,处理成本高昂,且响应延迟(首词元时间,TTFT)较长。

高效率的REFRAG

为了解决传统RAG的效率瓶颈,REFRAG(Representation For RAG,为RAG服务的表示法)架构应运而生。它不再强迫昂贵的LLM去阅读所有的原始文本,而是引入了智能的数据压缩和过滤机制:

  1. 查询与向量化: 用户查询输入后,系统检索到多个相关的文本块(Chunks)。

  2. 区块嵌入与过滤: 关键在于,这些文本块首先被转化为高度压缩的Token嵌入(Token Embeddings)或向量表示。一个由强化学习(RL)训练的“相关性检查器”会评估这些嵌入,并只选择其中最关键的少数区块保留其完整的文本形式。

  3. 混合上下文注入: 最终发送给LLM的提示是用户的查询、大量代表背景信息的压缩向量、以及极少数被选定的完整文本片段。

  4. 高效生成: LLM通过处理更少的原始词元和理解大量压缩向量,大幅提升了处理速度。

REFRAG的核心创新在于:它以极高的效率,变相地扩展了LLM处理信息的能力,在保持准确性的同时,能够实现数倍的加速和成本节约。

Agentic RAG

最新的演进是Agentic RAG(智能体RAG),它将RAG与自主智能体(Agent)的概念结合起来,实现了从简单的信息检索到复杂的任务规划和工具使用的飞跃。

Agentic RAG不再是一个单一的检索步骤,而是一个包含多个智能体的协作系统:

  1. 规划与分解: 用户的复杂提示首先被一个“聚合智能体”(Aggregator Agent)或“规划智能体”接收。这个智能体不会立即回答,而是利用LLM的推理能力(如ReAct、CoT或Planning)将复杂的任务分解成一系列子目标。

  2. 专业智能体协作: 聚合智能体会根据子任务的需求,派遣不同的专业智能体(Agent 1, Agent 2, Agent 3…)去执行操作。例如,一个智能体可能负责搜索本地数据(Local Data),另一个负责调用API,还有一个负责进行网页搜索(Web Search)。

  3. 定制化检索与记忆: 每个专业智能体可以独立地访问特定的数据源,并根据任务需要进行检索。更重要的是,它们被赋予了短期记忆和长期记忆的能力,使其能够在执行多步骤任务时保持上下文和连贯性。

  4. 最终聚合: 所有智能体完成它们的子任务后,聚合智能体收集所有结果和信息,并合成一个连贯、准确、且经过深度推理的最终回答。

Agentic RAG的价值在于,它不仅提供了外部知识,还赋予了系统推理、规划和执行复杂操作的能力,使其能够解决需要多步骤、多工具协作的现实世界问题,远远超出了传统RAG的范围。

这种技术的叠加和融合,预示着未来的 AI 应用将不仅是知识渊博的聊天机器人,更是能够自主思考、规划路径和利用专业工具的强大智能助手。

如何学习大模型 AI ?

由于新岗位的生产效率,要优于被取代岗位的生产效率,所以实际上整个社会的生产效率是提升的。

但是具体到个人,只能说是:

“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。

这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

在这里插入图片描述

第一阶段(10天):初阶应用

该阶段让大家对大模型 AI有一个最前沿的认识,对大模型 AI 的理解超过 95% 的人,可以在相关讨论时发表高级、不跟风、又接地气的见解,别人只会和 AI 聊天,而你能调教 AI,并能用代码将大模型和业务衔接。

  • 大模型 AI 能干什么?
  • 大模型是怎样获得「智能」的?
  • 用好 AI 的核心心法
  • 大模型应用业务架构
  • 大模型应用技术架构
  • 代码示例:向 GPT-3.5 灌入新知识
  • 提示工程的意义和核心思想
  • Prompt 典型构成
  • 指令调优方法论
  • 思维链和思维树
  • Prompt 攻击和防范
  • …

第二阶段(30天):高阶应用

该阶段我们正式进入大模型 AI 进阶实战学习,学会构造私有知识库,扩展 AI 的能力。快速开发一个完整的基于 agent 对话机器人。掌握功能最强的大模型开发框架,抓住最新的技术进展,适合 Python 和 JavaScript 程序员。

  • 为什么要做 RAG
  • 搭建一个简单的 ChatPDF
  • 检索的基础概念
  • 什么是向量表示(Embeddings)
  • 向量数据库与向量检索
  • 基于向量检索的 RAG
  • 搭建 RAG 系统的扩展知识
  • 混合检索与 RAG-Fusion 简介
  • 向量模型本地部署
  • …

第三阶段(30天):模型训练

恭喜你,如果学到这里,你基本可以找到一份大模型 AI相关的工作,自己也能训练 GPT 了!通过微调,训练自己的垂直大模型,能独立训练开源多模态大模型,掌握更多技术方案。

到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?

  • 为什么要做 RAG
  • 什么是模型
  • 什么是模型训练
  • 求解器 & 损失函数简介
  • 小实验2:手写一个简单的神经网络并训练它
  • 什么是训练/预训练/微调/轻量化微调
  • Transformer结构简介
  • 轻量化微调
  • 实验数据集的构建
  • …

第四阶段(20天):商业闭环

对全球大模型从性能、吞吐量、成本等方面有一定的认知,可以在云端和本地等多种环境下部署大模型,找到适合自己的项目/创业方向,做一名被 AI 武装的产品经理。

  • 硬件选型
  • 带你了解全球大模型
  • 使用国产大模型服务
  • 搭建 OpenAI 代理
  • 热身:基于阿里云 PAI 部署 Stable Diffusion
  • 在本地计算机运行大模型
  • 大模型的私有化部署
  • 基于 vLLM 部署大模型
  • 案例:如何优雅地在阿里云私有部署开源大模型
  • 部署一套开源 LLM 项目
  • 内容安全
  • 互联网信息服务算法备案
  • …

学习是一个过程,只要学习就会有挑战。天道酬勤,你越努力,就会成为越优秀的自己。

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名大模型 AI 的正确特征了。

这份完整版的大模型 AI 学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

一文搞定 GitHub SSH Key:生成、配置、好处全攻略 本文详细介绍了如何配置GitHub SSH Key,实现免密安全认证。主要内容包括:SSH协议的四大优势(免密登录、安全性高、稳定省心、支持自动化);Git身份配置步骤;检查本地SSH Key;生成RSA密钥对;添加密钥到SSH代理;复制公钥到GitHub;测试连接。配置完成后,开发者可通过SSH地址克隆仓库,实现push/pull全程免密操作。该方案显著提升Git使用效率,同时保障安全性,是开发者必备技能。 阅读详情

相关推荐

探索Three.js:利用ShaderMaterial实现动态着色器特效

本文深入探讨了Three.js中ShaderMaterial的应用,指导开发者利用GLSL编写自定义着色器实现动态特效。文章从核心概念GLSL、Uniforms与Attributes讲起,通过创建动态颜色变化平面的实战案例,逐步进阶到实现波纹扩散与动态光影等高级效果,并提供了性能优化与调试技巧,帮助读者掌握创建高性能WebGL视觉特效的关键技能。

weixin_29250403的博客 201

【干货收藏】RL增强型RAG实战:让大模型回答更精准的强化学习方案

本文介绍了基于强化学习(RL)增强的RAG系统构建方法,通过状态与动作设计、奖励机制、策略网络三个核心模块,实现了检索与生成过程的动态优化。系统支持查询改写、上下文扩展与过滤等操作,通过多轮迭代提升回答准确率。实验表明,RL增强型RAG相比基础RAG性能提升约25%,能更有效地处理复杂查询,生成更准确、相关的回答。

Android_XG的博客 1398

头歌OpenGauss数据库 - 单表查询 答案

本关任务:用SELECT语句检索数据表中指定字段的数据;用SELECT语句检索数据表中所有字段的数据。为了完成本关任务,你需要掌握: 1.如何获取数据表中指定字段的数据;2.如何获取数据表中的所有数据。

d214493517的博客 5720

Agentic RAG:对标准RAG(增强检索生成系统)的能力增强

一个简单的 RAG 由一个检索组件(通常由嵌入模型和向量数据库组成)和一个生成组件(一个LLM)构成。在推理时,用户查询的问题在索引文档中进行相似性搜索,检索出与问题最相似的文档,并为LLM提供额外的上下文。它通过整合外部知识源来增强传统的大语言模型 (LLM),使LLM能够访问和利用除初始训练数据之外的其他大量信息。可以将 RAG 想象为一位学者,除了拥有自己的知识外,还可以即时访问到一座全面的图书馆。RAG架构典型的 RAG 应用有两个显著的局限性简单的 RAG 仅考虑一个外部知识源。

m0_59235699的博客 1415

高斯泼溅(Gaussian Splatting):3D建模的颠覆性革命

高斯泼溅(Gaussian Splatting):3D建模的颠覆性革命

yingtu666的博客 5156

不用写触发器!帆软填报报表自动记录创建/修改时间的终极方案

本文详细介绍了帆软填报报表中无需编写数据库触发器,即可自动记录数据创建时间和修改时间的终极方案。该方案利用帆软内置函数和单元格条件属性,在应用层实现日期自动生成,有效规避了触发器带来的权限、维护和部署难题,为数据填报提供了更轻量、灵活且易于维护的解决方案。

weixin_28040125的博客 360

一篇Agentic RAG全栈技术最新综述

2025年RAG技术并不会消亡,而是以新的范式得到更广泛、深入应用,2025新鲜出炉的Agentic RAG全栈技术综述:全面回顾了RAG的发展历程,从最初的到,再到和,每种范式都有优劣。作为最新范式,通过引入自主Agent实现了动态决策和工作流程优化。详细探讨了的基础原则、架构分类、关键应用,实施策略等全栈技术。

lyy2017175913的博客 1090

时钟MUX电路结构的时序约束方法分析

一、最简单的设置 对于时钟MUX而言,其output_pin上的时钟在任一时刻一定唯一。可以使用如下命令: set_clock_exclusivity -output output_pin [-type mux | user_defined] ...

Jackiezhang1993的博客 1万+

探索智能代理增强检索生成(Agentic RAG):从基础到实践

至少定义一个检索工具包装向量存储调用。# 定义查询向量存储函数"""在向量数据库中搜索相关文档,并返回结果的连接字符串。"""# 组合检索到的文档的内容(可能带有元数据或片段格式)# 创建检索工具description="从知识库中检索相关文档。# (可选)定义网络搜索工具(模拟)# 实际网络搜索API调用占位符# 实践中使用SerpAPI或Bing API等description="在网络上搜索最新信息。

m0_65555479的博客 956

UE5接入在线直播视频源,如hls(m3u8)格式

UE5接入在线直播视频源

专注GIS开发 9500

【VisDrone数据集】YOLOX训练VisDrone数据集步骤与结果

YOLOX训练VisDrone数据集步骤与结果。

Gorgeous_wxd 2233

2025新年首发:Agentic RAG 综述

• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;引入自主代理,实现动态决策和工作流程优化,克服了传统RAG的静态工作流程和有限适应性。

2401_85379281的博客 1348

044、镜头脏污与异物检测:产线 AOI 检测方案与 ISP 脏污补偿

文章摘要(148字) 本文针对镜头生产中的脏污检测问题,提出产线AOI检测与ISP补偿结合的解决方案。产线端采用明场、暗场、偏振三通道联合检测技术,将油污漏检率从8.3%降至0.2%。ISP端通过RAW域局部梯度分析和频域补偿算法,动态修复产线漏检的微小脏污。作者结合实战案例,详细分析了传统灰度阈值法的局限性,并给出多模态检测的代码实现要点,强调必须建立"产线拦截+终端补偿"的双重防护机制。

sundong_81的博客 229

全网最全!老板必看:一文搞懂智能体,让公司效率翻倍的秘密武器

这篇文章将彻底打破技术壁垒,用老板能听懂的人话,从基础概念到实战案例,带你看透智能体如何成为企业降本增效的核武器,帮你快速落地!

qq_46094651的博客 1013

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

RAG:让AI不再“胡说八道”的秘密武器!

RAG(检索增强生成)是一种让AI回答更准确的技术,通过检索相关信息并增强生成过程,解决了传统AI容易"胡说八道"的问题。它包含三个核心步骤:首先从向量数据库检索相关信息,然后将问题与检索结果组合成增强提示,最后生成更可靠的答案。RAG能减少AI幻觉、实现知识实时更新且保护隐私,是提升AI回答质量的重要技术。

Gaga246的博客 1094

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

一文解锁AI Agent全栈架构:工程化落地的秘密武器

摘要:本文系统介绍了AIAgent全栈架构的六大核心模块,为企业智能化转型提供工程化解决方案。首先是运行环境,通过Docker实现稳定部署;其次是MCP服务,将模型能力转化为可执行动作;LangChain和LangGraph构成智能体的逻辑引擎;监控体系保障行为可控;AI原生IDE提升开发效率;多模型基座实现智能路由。文章还提供了从0到1的实战指南,强调AIAgent已从实验室走向商业应用,未来竞争将围绕体系化能力展开,需要建立覆盖环境、工具、框架、监控等环节的完整闭环。

找方案 1528

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

AI 智能体记忆系统的10大关键技术

摘要: 本文探讨了AI智能体长期记忆系统的10大关键技术,指出传统RAG方案因缺乏时序和因果关联,难以处理动态偏好变化(如电商场景中的用户品牌转向)。提出知识图谱框架Graphiti作为解决方案,其核心创新包括: 双时间记忆模型(记录事实学习与生效时间); 动态冲突解决(通过时间戳标记失效关系); 混合检索(结合语义搜索与子图遍历); 领域定制化(支持自定义实体与关系)。文章强调AI记忆需区分静态知识与动态事件,Graphiti通过时间感知和因果推理实现更拟人化的交互,并附开源工具与学习资源推荐。 (149

2401_85725028的博客 949

3分钟搞懂AI智能体:让大模型“活”起来的秘密武器!

AI智能体:赋予大模型行动能力的革命性突破 AI智能体(Agent)通过为大模型配备记忆、规划能力和工具调用功能,使其从被动应答升级为主动执行复杂任务。它能自主拆解目标、调用外部工具(如浏览器、API等),突破纯文本交互的限制。但使用时需注意:需在受控环境测试以避免错误操作风险,并设置预算上限防止token消耗失控。当前AI行业迎来爆发期,人才缺口达500万,相关岗位薪资涨幅超40%,掌握AI技能将成为职业发展的重要优势。(149字)

m0_74942241的博客 369

RAG优化策略大揭秘:11种方法提升AI搜索效率,让检索更精准!

本文详细解析了11种RAG检索增强生成优化策略,包括查询优化(重排序、智能体RAG、知识图谱等)和数据准备(上下文感知切分、延迟切分、分层RAG)两大类。作者强调应根据业务场景选择合适组合而非简单堆砌,建议从重排序开始建立基准线,逐个添加策略测试效果。文章提供了技术栈建议,指出最佳RAG系统是最适合特定场景的,而非最复杂的。

Z4400840的博客 976

小白必学!RAG技术详解:让大模型既省钱又专业的秘密武器,AI开发者的救命稻草!

RAG(检索增强生成)是一种混合式AI架构,结合检索和生成能力,通过先从外部知识库查找相关信息,再基于这些信息生成回答。其核心优势在于知识可更新(无需重新训练模型)、成本更低(无需将所有知识存储在模型参数中)、更准确(减少幻觉)和可追溯(明确信息来源)。RAG技术已成为企业级AI应用的标准配置,能显著降低模型部署成本,提高准确性和灵活性,尤其适用于金融、法律等对准确性要求高的领域。

weixin_58753619的博客 775

10分钟看懂11种RAG策略:让你的AI Agent从“能搜“到“会搜“

本文介绍了11种优化RAG(检索增强生成)系统的策略,帮助提升AI搜索的准确性和效率。文章分为查询优化和数据准备两大部分:在查询优化方面,推荐重排序、智能体RAG、知识图谱等8种方法,可显著提高搜索精准度;在数据准备方面,提出上下文感知切分、分层RAG等3种文档处理技术。作者建议根据业务需求选择组合策略,从基础方案逐步升级,并强调RAG优化是一个持续迭代的过程。文中还分享了推荐的技术栈和实用工具,为构建高效RAG系统提供实践指导。

2401_85592132的博客 1109

一文详解7种基于Transformer架构的AI应用技术

Function Calling 是给 AI 一个工具箱,MCP 是给 AI 一个应用商店。用 1 位替代 32 位存储向量,检索速度提升 30 倍,成本降低 97%。不仅检索,还会自动判断质量、联网补充、拦截错误答案。一次查询,同时搜索数据库(SQL)和文档库(RAG),还有 AI 守门员把关质量。搜索专家 + 分析专家 + 写作专家,人工把关质量,输出带引用的专业报告。不需要复杂的价值函数网络,通过"比较"而非"打分"训练推理能力。有数据用 SFT,没数据但能验证用 RFT,都没有用 RLHF。

m0_56255097的博客 1081

收入突破 5 万,从大专生到大模型开发-第三篇(上)

划重点:未来 3 年,AI 不是替代人类,而是创造 10 倍效率的“超级助手”! 比较火的 Agent 智能体,构建企业专有的智能体和多智体,市面上很常用的,比如论文智能体,翻译智能体,提示词智能体等等一系列,多智体可以完成一些复杂工作的产出,比如产品设计,UI 出图,大概架构设计,和基本业务逻辑和接口的撰写等一套流程化工作。RAG 的话,最常用的场景就是通用智能客服和企业内部的智能客服,通用智能客服:可以替代大部分客服的售前售后工作,回答用户基本的问题,可在知识库进行问答内容拓展,企业内部的智能客服:跟公

2301_81940605的博客 795

2025 年 AI 工程师必读:AI应用落地的7 个相关技术架构,大模型入门到精通,收藏这篇就足够了!

“Attention Is All You Need” —— 这篇论文开启了 AI 的黄金时代。如今,站在 Transformer 的肩膀上,我们将拆解 7 个正在重塑 AI 应用的一些技术架构。

DEVELOPERAA的博客 488

收藏!大模型时代,程序员如何进化?小白也能成为AI开发者的秘密武器!

2026 年,不是程序员的末日,而是创造力的解放日。代码将不再是冰冷的字符,而是思想的延伸。只要你有想法,你就能创造。不要做那个站在岸边担心海水太冷的人。跳下来,学会冲浪。在这个新时代,最酷的身份不再是“资深工程师”,而是“会用 AI 解决问题的创造者”。

kaka0722ww的博客 455

LangFlow社区推荐插件合集:提升开发效率的秘密武器

LangFlow通过可视化界面让LLM应用开发变得直观高效,支持拖拽式构建智能体流程。借助丰富的社区插件,可快速集成文档解析、向量检索、外部工具等功能,显著降低调试与协作成本,加速从原型到落地的全过程。

weixin_35903223的博客 710
上一篇: 【小白友好】RAG检索排序入门到实战,一篇搞定大厂面试,附项目经验写法!
下一篇: LangChain大模型操作数据库全攻略:从MCP到Tools再到SQL生成,一篇搞定大模型与数据库交互!
Python_金钱豹
博客等级 码龄5年 1万+粉丝 2835原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值