提升油气行业大模型RAG性能的关键技术

UltraRAG框架,是面向检索增强生成(RAG)系统的开箱即用解决方案 UltraRAG框架通过模块化设计、零代码编程、自研技术集成等创新手段,极大地简化了RAG系统的构建与优化流程。它不仅降低了学习成本和开发周期,还提升了模型适配能力和效率,为科研和企业应用提供了强大的支持。UltraRAG通过引入ViRAG技术,显著提升了多模态文档处理的能力,特别是在处理包含图表、图片等复杂信息的场景中表现突出。ViRAG通过视觉语言模型和视觉编码方式,实现了对多模态内容的高效检索和生成,同时通过多阶段评估方法确保了模型的鲁棒性和实际应用价值。 阅读详情

摘 要: 针对传统RAG 在关联分析、信息整合与逻辑推理能力等方面存在的局限性,以知识图谱与RAG为研究对象,分析国内外研究进展与应用案例。ChatLaw 引入领域专家精准定义法律实体、关系与案例,通过高质量知识图谱提升法律咨询的准确性。GraphRAG 采用知识图谱表示非结构文本中实体与关系,通过层次聚类、摘要生成等技术提升RAG 在大规模数据集上全局搜索能力。HippoRAG 在查询阶段利用知识图谱进行概念扩展和检索,提升RAG 知识整合与多跳推理能力。归纳RAG 与知识图谱融合方法,在数据分块、数据存储、查询优化、检索召回、重排、提示词构建、答案生成等阶段引入知识图谱,可以提升RAG 准确率、关联分析能力、推理能力与可解释性。基于Lucene、LangChain 等开源框架设计全文检索、向量检索、图谱检索3 套方案,将其应用于油气知识问答场景,验证知识图谱对增强RAG 的有效性。

关键词: 大语言模型;检索增强生成;知识图谱;向量数据库;图数据库

大语言模型(Large Language Model,LLM) 从海量训练数据中学习世界知识,并将其存储到模型参数中,具有强大的自然语言理解能力与文本生成能力。然而,纯参数化的LLM 在准确性、答案透明度、数据可控性、知识更新速度等方面仍面临诸多挑战。检索增强生成(Retrieval-Augmented Generation,RAG)将非参数化知识库与参数化语言模型相集成,为LLM 提供可动态更新的外部知识源信息,增强其文本生成能力。RAG 在一定程度上缓解了大模型“幻觉”、知识“时效性”、数据隐私等问题,受到了学术界和工业界的广泛关注,成为当前大模型应用落地最普遍、最有效的模式。

RAG 技术发展主要包括Naive RAG、AdvancedRAG、Modular RAG 3 个阶段。Naive RAG 是最早的研究范式, 包括索引、检索和生成3 个步骤。Advanced RAG 对Naive RAG 进行改进,在检索阶段使用滑动窗口、细粒度分割、元数据等优化策略提高检索效率,在生成阶段使用信息压缩、重排序等方法提升生成质量。Modular RAG 改变了Naive RAG 固有的检索与生成流程,采用模块化方法对RAG 流程进行设计和编排,具有更强的灵活性与多样性,已经成为RAG 领域的主流。无论RAG 范式如何演变,对外部知识的存储、索引与检索始终是RAG 的重要组成部分。

在大模型时代,向量是数据的主要表现形式,例如文本向量、图像向量、语音向量等。传统数据库采用文本匹配、TF-IDF、BM25 等算法实现搜索功能,无法对大规模、高维度、多模态的向量数据进行高效存储和检索。为此,向量数据库应运而生,成为RAG 系统中非参数化知识存储与检索的首选方案。当处理用户请求时,RAG 系统首先从向量数据库中检索与用户问题高度相关的数据片段,然后将这些附加上下文填充到提示模板中以增强大模型输入,最后经由LLM 生成符合事实性的回答。但是,向量检索具有模糊性,仅仅通过语义相似性搜索很难捕获数据之间的复杂关系与属性,在知识密集型行业应用效果并不理想。知识图谱(Knowledge Graph,KG) 是一种基于图的数据结构,采用实体、属性和关系对领域知识进行建模,能够进行精准匹配与多步推理,是实现知识共享、融合和挖掘的重要手段。因此,利用知识图谱提升RAG 性能已经成为很多科研机构的研究热点,为知识图谱与大模型的融合提供了可参考的集成方案。

本文以知识图谱与RAG 为研究对象,分析国内外相关研究成果与应用案例,给出了知识图谱在RAG 不同阶段的应用方案。最后以油气领域知识问答为例,验证知识图谱对提升RAG 性能的有效性。

1 知识图谱与RAG 技术概述

数据、算法和算力是人工智能技术的关键要素,数据即是基础性资源,也是战略性资源。中国石油天然气集团有限公司(简称中国石油) 经过数十年的勘探开发,积累了海量的业务数据与成果报告。在这些数据资源中,80% 以上为非结构化数据,质量参差不齐、处理难度大、隐藏在数据中的信息与知识尚未得到有效挖掘和利用,数据利用率低、知识共享程度低。虽然部分企业建立了知识库系统,提供文档查询和全文检索功能,但是无法将分散在各个文档中的知识点进行关联与整合,智能化程度低。

知识图谱构建包括本体建模、知识映射、文档解析、知识抽取、知识融合、图数据库存储等步骤,为语义检索、智能问答、方案推荐等应用场景提供支持。图1 给出了基于知识图谱的问答流程,当接收到用户问题时,首先对问题进行解析,提取出实体和关系,然后从图数据库中召回子图,通过计算子图与问题相关性,获取问题答案。

img

图1 基于知识图谱的问答流程

知识图谱一般面向特定领域,通用性和泛化能力弱,当用户问题表述不清或者超出知识库范围时,容易出现无法回答现象。大语言模型通过大规模的预训练和微调,从海量语料库中学习丰富的语义知识和语言表达能力, 与用户实现自由对话(图2)。

img

图2 基于大模型的问答流程

训练数据质量差、错误信息、过时信息、偏见,以及推理过程的不确定性等问题都可能导致大模型产生“幻觉”,输出错误答案。RAG 技术是一种结合检索和生成的知识增强方案,利用外部知识库辅助大模型生成过程, 确保生成内容的准确性和鲁棒性(图3)。

img

图3 基于RAG 的问答流程

2 知识图谱增强RAG 案例分析

石油工业是多学科交叉的知识密集型行业,对RAG 系统性能的要求相对较高。传统RAG 技术虽然可以实现对大规模非结构化数据的高效存储与检索,但是在精准预测、关联分析、信息整合、逻辑推理方面无法满足油气行业需求。为此以知识图谱提升RAG性能为研究对象,调研国内外相关案例,分析其技术方案,为油气行业大模型应用提供参考。

2.1 提升准确率

法律领域问题通常涉及法律的解释和适用,大模型必须正确理解法律规范,才能为用户提供正确的法律引导,否则可能对当事人的人身财产权益造成重大影响。法律语言的复杂性、法律条规的严谨性、条款之间的细微差别,以及立法的动态变化都为法律大模型的落地应用带来挑战。ChatLaw是由北京大学团队发布的开源法律大模型,通过结合法律领域特定的数据集和外部知识库,提高法律咨询服务的准确性和效率。ChatLaw 技术架构包括法律数据集与知识图谱构建、MoE (Mixture of Experts) 大模型构建、多智能体协作框架3 个部分(图4)。

img

图4 ChatLaw 技术架构

首先使用自动化工具对收集的多源数据(法律法规、司法解释、法律新闻、法律论坛、法律咨询等)进行去重和降噪,并安排法律专业的学生对案件进行分类,引入领域专家精准定义问题关系与节点关系,从而产生面向特定场景的知识图谱和智能代理任务数据集。

然后基于InternLM 架构建立了MoE 大模型,能够根据输入特征的差异性动态选择合适的专家模型,将每个专家模型的输出结果加权融合后作为最终结果,提升大模型在各个细分领域的专业能力。

最后建立多智能体协作框架,包括法律助手、法律研究员、资深律师和法律编辑4 类代理。法律助手与用户进行交互,从用户查询中提取关键信息,并与知识图谱进行链接,分析缺失信息,提示用户提供完整信息。法律研究员从交互信息中提取出法律实体、关系和重要案例,从知识库中检索相关案例与条文。资深律师对检索结果进行案例学习,经过相关性评估后输出综合分析结果。法律编辑根据分析结果选择答案模板,并将填充后生成的咨询文件反馈给用户。

2.2 提升关联分析能力

针对传统RAG 中数据分块导致的信息断裂与关联丢失问题,LinkedIn 研究团队提出了一种融合知识图谱与RAG 的客服自动问答架构(图5)。首先使用知识图谱对工单数据进行结构化表示,每个工单被解析为一棵树状图,不同层级的节点分别对应问题的标题、描述、复现步骤等内容,通过挖掘不同工单之间的关系形成语义连通图。然后利用BERT、E5 等预训练模型将知识图谱中的节点映射为高维语义向量,并存储到向量数据库中。在检索问答过程中,通过实体识别和意图检测,从知识图谱中提取相关信息后反馈给大模型生成答案。

img

图5 融合知识图谱与RAG 的客服自动问答架构

2.3 提升全局总结能力

传统RAG 在处理大规模外部数据源时,过度依赖局部文本片段检索,无法捕捉到整个数据集信息,为此微软研究院提出了一种基于全局摘要的GraphRAG方法(图6)。首先从源文档派生出实体知识图谱,然后采用图机器学习等技术将图谱聚类成不同粒度级别的实体社区,并为每个社区创建摘要。当接收到问题后,GraphRAG通过社区摘要生成部分答案,将这些答案汇总后作为最终答案反馈给用户。作者设计了相关实验,从准确性、多样性、全面性、直接性等方面评估GraphRAG在全局理解任务上的有效性。结果显示,相较于Naive RAG基线,GraphRAG实现了在复杂问答任务上的可扩展性,回答问题的全面性和多样性都有显著提升,同时节省了大量上下文信息,提高了查询性能。

img

图6 GraphRAG 预处理流水线

2.4 提升推理能力与可解释性

为了提高大型语言模型的准确性和可解释性,北京大学计算机学院提出了一种基于知识图谱的RAG 方法HyKGE (图7),包括假设输出、实体识别、知识图谱检索、重排、生成等模块。假设输出模块利用LLM 零样本能力获得探索性和假设性输出(Hypothesis Output,HO),补偿用户查询的不完整性,实体识别模块利用知识图谱中的推理链。HO片段粒度感知重排模块以更细粒度重新排列和整合检索到的知识,通过分而治之的思想增强用户查询与外部知识推理路径之间的对齐。生成模块将用户查询作为问题、推理链作为上下文输入到大模型中生成最终答案。HyKGE 利用结构化知识图谱对用户查询进行验证和修正,不仅显著提升回答的精确度,而且减少模型在处理复杂医疗问题时的不确定性。

img

图7 HyKGE 架构图

俄亥俄州立大学和斯坦福大学的研究人员设计了新型检索增强模型HippoRAG,以提升RAG 的知识整合与多跳推理能力(图8)。HippoRAG 使用大语言模型处理信息,知识图谱充当“记忆索引”,通过检索模型连接语言模型和知识图谱,并引入“节点特异性”概念,权衡概念重要性。当模型接收到一个新的查询时,首先从查询中提取关键概念,然后在知识图谱上应用个性化PageRank 算法进行概念扩展和检索,模拟联想记忆能力。最后模型根据节点的重要性对passage 进行排序和检索。

img

图8 HippoRAG 技术路线

3 知识图谱与RAG 结合方案探讨

综上所述,在RAG 的不同阶段都可以引入知识图谱增强系统性能,具体表现如下。

(1)数据分块阶段:数据分块较大会引入无关信息和冗余信息,影响准确率;数据分块较小容易导致信息断裂、关联丢失。在数据分块过程中,使用知识图谱将实体相关度较高的段落放到一个片段中,以获取合适的切片粒度;或者使用知识图谱存储文档布局信息,快速获取与查询相关片段。

(2)知识存储阶段:向量数据库通过高维向量处理非结构化数据,很难捕获不同数据类型之间的复杂关系和属性。图数据库以结构化方式表示和存储异构和互连的信息,能够进行复杂推理。将两者结合,可以提升现有RAG 系统的推理能力。

(3)查询优化阶段:使用知识图谱对用户查询进行扩展和改写,提高检索结果的相关性与质量。

(4)检索召回阶段:集成图谱检索、全文检索、向量检索等技术构建混合检索器,以适应不同的查询需求,在保证搜索效率的同时,提高搜索的准确性和全面性。

(5)重新排序阶段:根据知识图谱中实体重要性对检索结果进行排序,提升候选段落中包含最优答案概率。

(6)提示词工程阶段:从知识图谱中获取背景知识和推理链作为上下文,添加到提示模板中,提升RAG 系统的推理能力。

(7)答案生成阶段:用知识图谱对答案进行知识修正和知识溯源,提升答案的可靠性与可解释性。

4 基于知识图谱与向量数据库的RAG对比实验

随着RAG 技术的快速发展, LangChain、LlamaIndex 等开源框架中也集成了知识图谱、图数据库等组件与接口,方便企业快速实施RAG 项目。笔者选择油气领域知识问答场景进行实验, 并基于Lucene、LangChain 设计了3 套方案,对比分析全文检索、向量搜索、图谱搜索的应用效果。

4.1 实验准备

在LangChain 框架中,使用ChatGLM2-6b-chat 作为问答大模型,使用M3E 模型来生成嵌入,使用Faiss 向量数据库来储存知识库信息。

实验中使用的知识图谱系统为自主研发,具有百万节点的油气领域知识图谱数据,且有针对油气勘探领域的实体识别、关系抽取、知识融合和知识推理算法,相对有较好的数据基础和技术支持能力。该知识图谱存储于图数据库中,在智能问答实验中,采用如下提示模板(图9)。

img

图9 提示模板

4.2 实验方案

(1)基于Lucene 的检索问答方案。

图10 给出了基于Lucene 的检索问答流程(Lucene-QA),主要包括索引构建和检索匹配两个步骤。

img

图10 基于Lucene 检索的问答流程

①索引库构建。对非结构化文档进行解析,提取文本内容,经过特殊符号处理、停用词过滤、大小写字母转换等数据清洗流程后,结合领域词典与专业术语进行分词,构建倒排索引表,写入索引库。

②检索匹配。对用户问题进行语法分析和分词处理,获取检索词,并结合本体库进行语义扩展,以提高查全率;在索引库中进行搜索,获取相关文档列表,根据文档与查询的相关性,对检索结果进行排序,将满足阈值要求的k 个文档作为查询结果反馈给用户。

(2)基于知识图谱的RAG 方案。

图11 给出了基于知识图谱的RAG 方案(KGRAG),以问题“管道检测技术是什么?”为例,问答流程如下:

①用户提出问题;②经过实体抽取算法,抽取出实体,在此问题中,实体为“管道检测技术”;③使用实体“管道检测技术”检索存放在图数据库中的知识图谱;④获得与被检索实体“管道检测技术”相关的子表信息;⑤将子表信息数据转化为结构化的JSON 格式;⑥作为上下文加入提示词向语言大模型提问并得出答案“管道检测技术是……”。

img

图11 基于知识图谱的RAG 系统问答流程

(3)基于向量数据库的RAG 方案。

图12 给出了基于向量数据库的RAG 方案(Vector-RAG),主要包括向量数据库构建与用户查询两个阶段。

img

图12 利用向量数据库的RAG 系统问答流程

向量数据库构建包括以下步骤:

①将本地的油气领域知识文件进行文本切分生成文本块;②使用向量化模型生成文本块的内嵌;③构建向量数据库的索引并将文本块内嵌至向量数据库。

以问题“管道检测技术是什么?”为例,用户查询流程如下:

①使用向量化模型将用户问题转化为内嵌;②在向量数据库中查询与用户问题相关的文本块;③将相关文本块加入提示词向大模型提问并得出答案“管道检测技术是……”。

4.3 实例分析

基于上述方案,设计了多个油气领域内的专业问题,并对问答结果进行分析,部分实例如表1 所示。

表1 KG RAG 与Vector RAG 问答实例对比分析

img

4.4 实验结论

通过实验对比,可以得出:

(1)基于Lucene 的检索问答主要根据关键词匹配获取相关文档,用户需要对检索结果进行归纳整理后得到最优结果。KG RAG 与Vecetor RAG 集成了大模型强大的自然语言理解能力与生成能力,能够对检索结果进行归纳总结后生成答案。

(2)基于相同知识文档建立的知识图谱和向量数据库,在领域知识问答任务中的应用效果存在明显差距。对于同一个问题,KG RAG 给出的答案比VectorRAG 给出的答案更加准确、直观,减轻了大模型的“幻觉”。

(3)如果没有高质量的知识图谱,Vector RAG 无疑成为相对经济便捷的选择。对于高度结构化的细分领域(如油气领域) 智能问答,高质量的知识图谱能够给大模型的回答质量带来巨大提升,包括但不限于:幻觉更少、更准确、更完整、更结构化、逻辑更严谨的回复。

5 结束语

油气行业业务流程复杂,数据类型多样,非结构化数据治理、多尺度数据融合、跨部门数据共享等问题使得人工智能数据集构建面临严峻挑战,加大了人工智能应用落地的成本与难度。知识图谱技术可以解决油气知识表征、知识抽取、知识融合与知识推理等问题,但是需要领域专家深度参与,投入成本大、建设周期长。RAG 技术可以对大规模非结构化数据进行高效存储与检索,成本低、见效快,但是无法进行精准匹配和复杂推理。将知识图谱与RAG 系统进行结合无疑是最佳选择,可以实现优势互补。以知识图谱与RAG 为研究对象,分析了国内外相关案例与其技术方案,探讨了知识图谱在RAG 不同阶段的结合方案,并以油气领域知识问答为例,验证了知识图谱对提升RAG 系统性能的有效性,为油气行业实施大模型项目提供参考。

随着大模型技术的快速发展,斯伦贝谢、哈里伯顿、沙特阿美等全球知名油公司正加速向“硅谷”靠拢,期望在数据、算力、算法的加持下,寻求更多的领先数智化技术,以提升自身数智化水平。中国石油、中国海洋石油集团有限公司、中国石油化工集团有限公司等企业也启动了相关研究,积极探索大模型技术在地质建模、储层预测、智能解释、风险识别、数值模拟等场景下的应用模式与技术路径,为油气行业的智能化发展注入新质生产力。

如何零基础入门 / 学习AI大模型?

大模型时代,火爆出圈的LLM大模型让程序员们开始重新评估自己的本领。 “AI会取代那些行业?”“谁的饭碗又将不保了?”等问题热议不断。

不如成为「掌握AI工具的技术人」,毕竟AI时代,谁先尝试,谁就能占得先机!

想正式转到一些新兴的 AI 行业,不仅需要系统的学习AI大模型。同时也要跟已有的技能结合,辅助编程提效,或上手实操应用,增加自己的职场竞争力。

但是LLM相关的内容很多,现在网上的老课程老教材关于LLM又太少。所以现在小白入门就只能靠自学,学习成本和门槛很高

那么我作为一名热心肠的互联网老兵,我意识到有很多经验和知识值得分享给大家,希望可以帮助到更多学习大模型的人!至于能学习到多少就看你的学习毅力和能力了 。我已将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

这份完整版的大模型 AI 学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】

👉 福利来袭优快云大礼包:《2025最全AI大模型学习资源包》免费分享,安全可点 👈

全套AGI大模型学习大纲+路线

AI大模型时代的学习之旅:从基础到前沿,掌握人工智能的核心技能!

read-normal-img

640套AI大模型报告合集

这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

👉学会后的收获:👈
• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;

• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;

• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;

• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。

👉 福利来袭优快云大礼包:《2025最全AI大模型学习资源包》免费分享,安全可点 👈

img

这份完整版的大模型 AI 学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】

作为普通人,入局大模型时代需要持续学习和实践,不断提高自己的技能和认知水平,同时也需要有责任感和伦理意识,为人工智能的健康发展贡献力量。

能源行业大模型落地指南:选型、部署与避坑 大模型技术正从通用对话走向行业纵深,其核心原理在于通过向量化与检索增强生成(RAG),让模型在特定知识库内完成上下文理解与文本生成。这项技术的价值在于将组织内部散落的非结构化数据——如设备手册、检修记录、调度规程——转化为可检索、可推理、可执行的数字资产,从而缓解数据孤岛和专家经验留存难题。在能源行业,大模型可应用于设备检修辅助、调度决策支持、安全巡检报告生成等知识密集场景,但真正的挑战在于私有化部署和工程质量控制。本文从实战视角出发,梳理了从开源模型选型、量化推理参数配置,到知识库构建、SSE流式输出,再 阅读详情

相关推荐

能源行业大模型落地指南:从场景选型到私有化部署与评测

在数字化转型浪潮中,大模型技术正在深入工业场景,但落地远比想象中复杂。以能源行业为例,生产数据不出内网、系统异构、安全容错低等约束,决定了通用AI方案难以直接复用。企业真正需要的不是堆砌参数,而是从业务场景反推技术路径:先梳理知识问答、数据分析、内容生成、辅助决策四类应用形态,再结合私有化部署与开源模型的算力选型,构建RAG知识库与权限安全围栏。通过推理参数调优、领域评测集和渐进式验收,才能让大模型从演示PPT走向稳定生产环境。本文以工程实践视角拆解一套可复现的落地路径,帮助架构师与项目管理者规避典型陷阱,

weixin_28678151的博客 260

油气行业人工智能大模型应用研究现状及展望

在过去的几年中,人工智能技术已经从专门的应用和有限的能力迈进了一个全新的时代—通用人工智能(AGI)时代。这一跨越得益于大模型的发展,大模型逐渐成为推动新质生产力发展的关键动力。中国大模型产业正面临“百模大战”的局面,相较于美国,中国大模型产业的核心竞争力是“大模型+实体产业”。大模型的行业应用展现出巨大潜力,但技术路线也尚未成熟,落地应用面临诸多困难和挑战。油气行业大模型应用要保持理性,要充分认识油气行业大模型的特殊性,从数据、算力、算法等方面夯实基本功。

youmaob的博客 2889

智能车竞赛走马观碑组:如何高效识别目标板并优化绕行策略(附实战代码)

本文深入探讨了智能车竞赛走马观碑组中,如何构建从图像识别到路径决策的全栈优化方案。针对目标板识别与绕行策略的核心难点,文章详细解析了基于MobileNetV2的高效识别流水线、结合预瞄点与纯追踪算法的平滑路径规划,以及横向与纵向协同控制策略,并提供了实战代码与调试指南,旨在全面提升小车的比赛表现。

o5p6q的博客 884

大模型在油气行业的落地实践应用

聊天小达人ChatGPT的出现,引爆了整个科技行业乃至人类社会,被誉为新一代的工业革命,也让背后的大模型技术被大家熟知。那么,什么是“大模型”呢?“大模型”就是大型语言模型的简称,一个技术名词。WIKI百科对大语言模型是这样解释的:大语言模型 (英语:large language model, LLM)是一种语言模型,由具有许多参数(通常数十亿个权重或更多)的神经网络组成,使用自监督学习或半监督学习对大量未标记文本进行训练。大型语言模型在 2018 年左右出现,并在各种任务中表现出色。

aolan123的博客 2073

IEC 62056协议栈深度拆解:从物理层握手到应用层AARQ,一次完整的DLMS通讯抓包分析

本文深入解析IEC 62056协议栈(DLMS/COSEM)的全流程通信机制,从物理层握手到应用层AARQ建立,提供详细的抓包分析和实战指南。涵盖RS-485配置、HDLC帧解析、OBIS编码解读等核心内容,并附有常见故障排查技巧,助力开发者高效实现电能表数据采集。

weixin_29182481的博客 312

逆向淘宝x-mini-wua:从加密算法到设备指纹的生成逻辑

本文深入剖析了淘宝风控核心参数x-mini-wua的生成逻辑与加密算法。通过逆向分析,揭示了其作为设备“身份证”的作用,详细拆解了从硬件信息采集、SG_INNER_DATA文件解密、关键参数提取到最终长wua合成的完整技术链条,并探讨了模拟生成与绕过风控的实战思路及注意事项。

year5的博客 1076

油气行业人工智能发展

翟丽娜从1956年,麦卡锡、明斯基等科学家首次提出“人工智能(Artificial Intelligence,简称AI)”的概念;到2016年李世石与Alpha Go的人机围棋大战;再到今年ChatGPT横空出世……被誉为“第四次”工业革命引擎的人工智能技术正在深度改变着人类生活。在AI浪潮的推动下,油气行业也正朝着智能化发展的道路大步迈进。

it266554的博客 1094

PromptBio实战:如何用AI对话搞定转录组数据分析(附详细操作截图)

本文详细介绍了如何利用PromptBio平台通过AI对话完成转录组数据分析,无需编程基础即可实现从数据上传到结果解读的全流程。文章包含详细的操作截图和参数配置建议,帮助科研人员快速掌握这一生信分析工具,显著提升研究效率。

weixin_30872157的博客 135

“大+小模型”赋能油气行业高质量发展

其中,AIFS是一款行业领先的人工智能应用构建基础设施平台,可以为油气行业自主构建全生命周期的“大+小”模型提供一站式支持,最大化利用底层资源和油气集团单位已构建的统一数据湖仓,支撑上层应用开发,形成AI资产的全生命周期管理,加速油气行业实现亟需的自主AI能力积累和AI规模化应用。张磊在演讲中指出,当前迎来大模型的发展热潮,但大模型不是万能的,大模型的训练需要大量数据,同时大模型的训练微调对算力的消耗较高,在解决特定性问题任务上,成本远高于小模型。因此,大模型和小模型将共同存在,分别解决不同类型的问题。

weixin_46880696的博客 841

31、贝叶斯认知建模与隐马尔可夫模型:理论与应用

本文探讨了贝叶斯认知建模与隐马尔可夫模型(HMM)的理论基础及其在认知科学和神经科学中的应用。重点介绍了贝叶斯定理和HMM的基本原理,并结合实际案例,如情绪识别系统和脑机接口(BCI),展示了它们在处理复杂认知任务中的强大能力。文章还讨论了贝叶斯-HMM模型的技术细节、优势与局限性,以及未来的发展前景。

meat5的博客 141

逻辑电平(TTL/CMOS/LVDS/LVPECL/CML)

逻辑电平介绍 TTL------晶体管-晶体管逻辑门(Transistor-Transistor Logic gate) TTL采用5V电源

sinat_15677011的博客 2万+

告别一次检索!RAG 2.0让大模型边思考边检索,AI开发者必看的技术升级

RAG技术从1.0到2.0实现了重大升级,从线性检索架构演进为支持多轮推理、混合模态检索的闭环认知系统。RAG 2.0引入智能体协作、动态规划、反思机制等能力,实现"思考中检索"而非"思考前检索"。在工程实践中,多粒度文档分割、重排序模型、混合检索、GraphRAG和Agentic RAG等技术显著提升了知识检索精度和领域适应性,使大模型能像专家一样进行复杂推理和决策支持。

xx_nm98的博客 831

YOLOv11改进 - C3k2融合 | C3k2融合融合WDBB宽度多样分支模块(Width Diverse Branch Block)通过多尺度分支增强特征表征能力

本文着眼于灰度图像目标检测所面临的挑战,提出了增强型目标检测网络 YOLO - MIF,该网络整合了多种多信息融合策略以对 YOLOv8 网络进行改进。文章开篇介绍了一种可创建伪多通道灰度图像的技术,此技术能增加网络的通道信息,同时缓解潜在的图像噪声与虚焦模糊问题。随后运用网络结构重新参数化技术,在不增加推断时间的情况下提升网络的检测性能。此外,引入了一种新颖的解耦式检测头,增强了模型处理灰度图像时的表现能力。

魔改工程师的博客 770

知识图谱+大模型:16个行业爆款案例

本案例集系统展示了知识图谱与大模型融合技术在多个行业领域的创新应用与实践成果。通过16个典型案例,全面呈现了"知识图谱增强大模型"和"大模型增强知识图谱"两种核心融合模式在解决行业痛点、提升业务效能方面的显著价值。阅读原文或https://t.zsxq.com/bW7LJ获取原文pdf。

m0_59162248的博客 499

silero-vad 训练自己的数据

silero-vad 训练自己的数据

jacke121的专栏 816

数学建模模型总结

这是本人在两年内准备参加数学建模竞赛搜集到的模型资料,已经经过了本人的筛选和整理,希望能够对准备参加数学建模竞赛的学弟学妹们提供一些帮助!

知识图谱与大模型融合案例:16个行业案例揭示AI应用新范式,工信部标准院重磅发布

本案例集系统展示了知识图谱与大模型融合技术在多个行业领域的创新应用与实践成果。通过16个典型案例,全面呈现了"知识图谱增强大模型"和"大模型增强知识图谱"两种核心融合模式在解决行业痛点、提升业务效能方面的显著价值。

732

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

中国石化率先完成 DeepSeek 大模型国产化部署,助力石油化工行业智能化转型

近日,中国石化在人工智能领域再传捷报!据中国石化新闻办消息,自国产深度推理大模型 DeepSeek 发布以来,中国石化迅速行动,第一时间组建专门的模型部署和测评团队,并在 2 月 5 日成功完成 DeepSeek 在国产化算力环境上的全尺寸部署,并接入长城大模型应用系统,目前已开始在企业内部分批推广使用。这一突破不仅为中国石化智能化转型提供了强有力的技术支撑,也为我国人工智能技术在工业领域的落地应用树立了标杆,助力行业迈向更高效率和创新。part 01高效部署,性能翻倍。

qq_46094651的博客 3007

RU DOS版、EFI版32bit/64bit BIOS常用工具

DOS版、EFI版的RU工具,可用来查看IO、MEM、PCI、SMBIOS等资源。亲测在EFI SHELL下可用。

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

AI资本开支超油气,开发者如何抓住AI工程化红利?

在数字化转型加速的背景下,企业基础设施投入正从传统计算资源转向人工智能算力体系。资本开支(Capex)作为衡量行业景气度的核心指标,其结构变化揭示了技术演进的方向:当AI相关投入首次超越油气行业,意味着算力已成为驱动产业升级的新型战略资源。这一趋势推动了GPU集群、高性能网络、分布式训练与推理优化等底层技术的规模化落地,也让RAG知识库、AI Agent等应用模式从概念走向生产实践。对于后端、运维及算法工程师而言,理解从模型部署到应用交付的完整链路,掌握向量检索、推理服务、成本治理等工程化能力,将成为承接技

weixin_34320724的博客 495

2025年AI Agent开发全攻略:从概念泛化到企业级生产力再造

本文探讨了AI Agent的商业价值、概念泛化及场景重塑,分析了其在企业级生产力再造中的关键作用。文章梳理了企业级AI Agent的核心特征及开发标准趋势,为AI Agent产业发展提供了前瞻性视角,助力企业和开发者把握AI浪潮中的发展机遇。

weixin_72959097的博客 1406

知识图谱与大模型融合:工信部16个行业案例全解析(非常详细),从理论到落地,收藏这一篇就够了!

本案例集系统展示了知识图谱与大模型融合技术在多个行业领域的创新应用与实践成果。通过16个典型案例,全面呈现了"知识图谱增强大模型"和"大模型增强知识图谱"两种核心融合模式在解决行业痛点、提升业务效能方面的显著价值。

Python_cocola的博客 786

油气生产测井流体物性计算知识库:从数据到模型的工程实践

在油气勘探开发领域,准确获取井下流体物性参数是生产测井解释与油藏动态分析的基础。传统方法依赖经验公式或笨重专业软件,面临数据不一致、计算效率低等挑战。其核心原理在于将物理化学模型、经验关联式与现场数据相结合,构建可计算的知识体系,实现从温度、压力、组分等输入到密度、粘度等关键物性的快速、可靠预测。这一技术价值在于将领域专家经验转化为可复用的数字资产,大幅提升工程计算的一致性与效率。应用场景涵盖从单井产出剖面解释到油田开发方案优化等多个环节。本文聚焦于油气生产测井垂直知识库的构建,详细阐述了其数据层、模型层与

weixin_34302561的博客 360

大模型用的都是什么数据库?

在2025年的AI技术版图中,大模型已成为数字世界的"超级大脑",而支撑其运转的数据库系统正经历着从"数据仓库"到"智能引擎"的质变。根据OpenAI最新报告,全球75%的千亿参数级大模型已采用混合数据库架构,其中向量数据库与图数据库的组合方案增速达300%。例如,分析“宁德时代→锂电池→特斯拉→4680电池技术”的三度供应链关系,排除与目标无关的噪声数据。这种分层协作模式,既保留了向量搜索的​​语义理解优势​​,又通过图结构实现了​​逻辑严谨性验证​​,最终输出可解释、可追溯的智能结果。

weixin_45631123的博客 1724

大模型本地部署硬件资源学习(包含模型微调所需资源)

本博客将全面探讨构建系统的需求分析框架到深入解析华为昇腾算力的支持能力,再到提供详尽的显卡信息对比和大模型微调所需的显存资源指南。特别针对Qwen系列与DeepSeek蒸馏模型,将详细介绍其微调显存需求、优化策略及硬件选型建议。

weixin_44733966的博客 6609

知识图谱案例 | 某工业研究院知识图谱落地实战,突破RAG局限,构建一体化知识平台

【摘要】某工业研究院面临管道材料失效研究领域知识碎片化难题,需整合数千份分散的文献、实验数据和案例报告。传统RAG方案仅能返回文本片段,无法构建结构化知识网络;人工图谱建设则成本高、更新滞后。北极星Polaris提供闭环知识资产解决方案:1)可信源筛选与溯源;2)通过知识图谱实现结构化关联与GraphRAG多跳推理;3)支持持续治理与增量更新;4)无缝对接业务场景(问答/报告/智能体)。其核心价值在于将碎片知识转化为可运营、可演进的企业资产,解决AI落地中的证据链缺失与知识沉淀问题。(149字)

weixin_44592002的博客 242

详解工业场景下的智能体AI(Agentic AI)大模型入门到精通,收藏这篇就足够了!

Gartner将智能体人工智能(Agentic AI)列为2025年十大技术趋势之首,这种具备自主决策能力的机器智能已突破传统聊天机器人的局限,可在无人工干预下完成复杂企业级任务。

瓦罗兰特顶级C位的博客 1577
上一篇: 推荐一本get新技能的书籍,人人都可动手做AI Agent基础入门!!!
下一篇: Embedding、向量模型怎么选?知识库准不准还得看它
AI程序猿人
博客等级 码龄3年 6517粉丝 561原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值