专栏《大模型+RAG原理与实战》目录

诸神缄默不语-个人技术博文与视频目录

专栏网址:https://blog.youkuaiyun.com/polarisrisingwar/category_13090713.html

本专栏旨在介绍大模型+RAG(知识检索增强)的原理和实战,实战主要关注部署本地AI知识库。RAG能够充分利用私有知识数据来提高模型的专业能力,迅速更新知识,减少大模型生成结果的幻觉,本地化部署能保证私密数据不泄露,符合对数据安全性的要求。

本专栏承诺只会涨价,绝不降价!

(当前目录是撰写规划,可能会根据后续实际撰写安排(随时可能更新技术……)而产生修正)

因为付费专栏要求文章字数必须大于5000字,所以本篇现在不在付费专栏里。

1. 大模型+RAG原理简介

  1. 大模型简介+常用大模型教程(上)
    包括对大模型的简单介绍和对6个常用大模型(ChatGPT、DeepSeek、元宝、Kimi、豆包、Gemini)的使用教程分享
  2. RAG简介和基本原理,与现成知识库的简单使用教程

2. 大模型+RAG实战

  1. PyTorch的下载、安装与基础使用教程
  2. PyTorch的数据预处理、模型训练与评估、推理基础教程
  3. transformers的下载、安装与基础使用教程
  4. 大模型的本地化部署
  5. RAG实战:分块、向量化、检索、排序、生成
  6. 提示工程
  7. 模型的部署、开放服务与前端可视化
  8. 实例1:通过领导讲话、历史文章、新闻材料构建的公文撰写知识库
  9. 实例2:论文润色工具
  10. 实例3:断代史知识库

3. 拓展知识

  1. 人工智能和自然语言处理原理和发展历史
  2. 机器学习基础知识:优化算法和正则化
  3. 深度学习基础知识:MLP、CNN、RNN、Transformer
  4. 自然语言处理基础知识:分词、词表征、seq2seq
  5. 大模型理论简介:从BERT和GPT开始的预训练模型和scaling law

4. 本文撰写过程中参考的资料

部分仅在单章撰写时参考的资料列在单章博文中。

  1. 《大模型应用开发:RAG入门与实战》
大模型RAG(检索增强生成)和Prompt(提示工程)在AI领域有着紧密的联系和广泛的应用。 ### 相关知识 - **大模型**:AI大模型具有强大的语言理解和生成能力,如GPT等模型,能进行多种自然语言处理任务,如文本生成、问答系统等。随着技术发展,人们对大模型的需求逐渐从通用能力转向私有化、个性化和定制化,以满足特定场景或领域的需求[^4]。 - **RAG(检索增强生成)**:是一种结合信息检索生成模型的技术,通过外部知识库提升生成内容的准确性和相关性。它可以解决大模型存在的产生幻觉、缺乏对生成文本的可解释性、专业领域知识理解差以及对最新知识了解有限等问题。但RAG也面临一些挑战,如产生幻觉、缺乏可解释性、专业领域知识理解差和对最新知识了解有限等[^1][2]。 - **Prompt(提示工程)**:在大模型应用中,Prompt是向模型输入的指令或问题,用于引导模型生成期望的输出。随着对大模型使用的深入,Prompt的技巧策略需要适应LLM大模型的整体框架进行改进,不能只局限于局部运用[^1]。 ### 结合应用 - **定制化AI助手**:企业或个人希望拥有属于自己领域专业的AI助手,RAG技术可以为其打造专属的大模型知识库。通过Prompt工程设计合适的提示,引导大模型结合知识库中的信息,为用户提供特定场景或领域的精准答案。例如,企业可以利用RAG结合大模型和Prompt,创建一个能解决业务流程中特定问题的AI助手[^1][4]。 - **提高检索和生成性能**:RAG模型实现了动态Prompt生成技术,通过分析初步检索的结果,自动调整或生成新的Prompt,以优化后续的检索和生成过程。这种反馈循环可以显著提高模型的性能。同时,RAG模型允许用户对初步生成的Prompt进行评价或修改,基于用户反馈进一步优化检索和生成的结果[^3]。 ### 代码示例 以下是一个简单的代码示例,展示如何封装模型(以阿里大模型为例): ```python from dotenv import load_dotenv load_dotenv() # 加载阿里大模型 from langchain_community.chat_models import ChatTongyi def get_tongyi_chat_model(): return ChatTongyi(model="qwen-turbo", temperature=0.1, top_p=0.3, max_tokens=512) if __name__ == "__main__": # 测试 model = get_tongyi_chat_model() response = model.invoke("你好") print(response) ```
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

诸神缄默不语

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值