Knowledge Graph Studio:让知识图谱构建更简单、更智能

2.特定领域知识图谱(Domain-specific KnowledgeGraph:DKG)融合方案:技术知识前置【一】文本匹配算法、知识融合学术界方案、知识融合业界落地方案、算法测评KG生产质量保障 本项目主要围绕着特定领域知识图谱(Domain-specific KnowledgeGraph:DKG)融合方案:技术知识前置【一】-文本匹配算法、知识融合学术界方案、知识融合业界落地方案、算法测评KG生产质量保障讲解了文本匹配算法的综述,从经典的传统模型到孪生神经网络“双塔模型”再到预训练模型以及有监督无监督联合模型,期间也涉及了近几年前沿的对比学习模型,之后提出了文本匹配技巧提升方案,最终给出了DKG的落地方案。这边主要以原理讲解和技术方案阐述为主,之后会慢慢把项目开源出来,一起共建KG,从知识抽取到知 阅读详情
AI摘要

本文介绍了WhyHow.AI团队开源的Knowledge Graph Studio工具,其创新融合RAG理念与知识图谱构建。该工具采用结合NoSQL的架构,有模块化图谱构建等核心功能,可用于公安执法等多场景。此外,还分享了大模型AI的四阶段学习方法及资料获取途径。

一、前言

上周和研究院的同事讨论 2025 年大模型产品规划时,让我产生了一些疑惑和不解,因为从大家交流的规划方向来看,更多的还是集中在Prompt提示词工程(包括提示词的管理、测试、评估、调优)这一块规划的确实挺细,另外一个重点也提到了对于大模型微调、训练以及模型推理效率的提升、包括兼容适配国产GPU算力。等我听到,发现对于领域知识库的构建和大模型智能体的规划基本上没有或者一笔带过,最关键的是对于知识图谱完全没有提及。

我突然意识到一个问题,研究院对于大模型的规划只是停留在自身技术层面以及对于大模型能力边界的考虑,而忽视来大模型的能力最终是要在业务场景中赋能落地的,不然是无法体现技术的价值。对于从事公安执法领域十多年,我深知公安办案业务的复杂性,而在这个垂直领域,如果仅仅靠选择一个开源的通用大模型,就算把提示词玩的再花,大模型能力和知识边界的局限摆在眼前,其结果可想而知,大模型产生的结果是很难达到生产级别的准确率的。

而要基于大模型的能力落地公安执法领域的业务场景,领域知识库的建设是不可或缺的,因为靠从头构建预训练大模型这条路不是一般的企业可以承受的,从国内外的市场发展格局依然清晰,基础大模型的持续投入国内外基本上只会存在几家头部顶部企业才有能力去做这块的研发。

从Menlo Ventures投资公司对美国600家企业针对生成式AI在企业中的应用现状调研分析结果可以看到:

  1. 最大投资领域:基础模型的投资额遥遥领先,从2023年的10亿美元增长到2024年的65亿美元。

  2. 第二梯队:训练与部署的投资规模位居第二,2024年达到23亿美元。

其中,对于垂直类的AI应用也相比去年增长了12倍,虽然调查报告来源于美国市场,但由于美国是全球AI技术和应用的领先市场,对于基础模型和模型基础设施的投入美国的力度还是非常大的,国内更多还是侧重于大模型应用开发领域。从整体来看,所有领域都呈现出显著的增长态势,特别是基础模型领域的投资规模最为突出,这反映了市场对AI基础能力建设的持续重视。

除了常规的基于RAG构建公安执法领域的相关知识库之外,只能在一定程序上解决对于案件、法律法规的基础咨询问答,而对于一些案件的处罚、判决,侦查辅助,调查取证,在一个复杂的团队案件中尤其复杂,经常需要处理错综复杂的关系网络。比如说一个涉毒案件,从最初的线索到最终破案,中间可能涉及到多个嫌疑人、多条证据链、多个关联案件,还要考虑各种时空关系。如果只是简单地让大模型去读取案件材料,很难准确理解和推理出这些复杂的关联关系。

而 RAG 的关键能力还是在于检索增强,也就是帮助大模型更准确地获取和理解文档中的信息。但在实际的执法办案过程中,我们往往需要处理更复杂的场景:比如需要分析多起案件之间的关联性、推演案件事实之间的逻辑关系、判断不同时间地点的证据链条是否完整、评估多个违法事实对应的法律适用条款等。这些涉及事件关系推理、时空信息计算、法律决策判断的任务,仅靠 RAG 的能力是很难满足的。

这时候,构建案件和证据的知识图谱就显得尤为重要了。通过图谱,我们可以清晰地展现案由、违法事实、法律条款之间的关联关系,实现:

1. 案件要素的快速定性:基于图谱中预设的案件模型,快速识别和匹配关键违法事实;

2. 证据链条的完整性校验:通过图谱的关系推理,自动检查证据之间的逻辑关联,确保证据链条的完整性;

3. 法律条款的精准适用:根据违法事实的特征,结合图谱中的法律知识库,准确匹配适用的法律条款;

4. 案件之间的关联分析:利用图谱的网络结构,发现不同案件之间可能存在的关联线索,辅助串并案侦查。

有了这样一个结构化的知识体系作为支撑,再配合大模型的自然语言理解能力,我们就能够更加准确、高效地完成案件办理过程中的各项任务,真正实现智能化办案的目标。

今天无意间在GitHub上看到 WhyHow.AI 团队开源了他们的 Knowledge Graph Studio(以下简称 KG Studio)工具时,立刻意识到这可能是一个重要的突破口,因为对于知识图谱跟RAG原生结合的技术和工具似乎在开源界一直都相对比较空白,除了前端时间微软开源的GraphRAG技术。这个工具的意义不仅在于降低了知识图谱的构建门槛,更重要的是为我们在公安执法领域的大模型应用提供了一个关键的补充方案。

在接下来的内容中,我将从技术架构、核心功能、应用场景和未来展望等几个维度,详细分析 KG Studio 的特点,以及它如何助力我们更好地将大模型能力落地到公安执法的实际业务中。

二、介绍Knowledge Graph Studio

Knowledge Graph Studio 是 WhyHow.AI 团队最近开源的一款专注于知识图谱构建和管理的创新工具平台。作为一个完整的知识图谱解决方案,它不仅提供了图谱构建的核心功能,更重要的是首次将 RAG(检索增强生成)的理念深度整合到知识图谱的构建过程中。这种创新的融合方式,让知识图谱的构建和应用有了更多可能性。

与传统的知识图谱工具相比,Knowledge Graph Studio 的与众不同之处在于它的"RAG原生"设计理念。它不仅支持传统的三元组存储和查询,还能够保持文本块、实体和关系之间的紧密关联,确保了知识溯源的完整性。这种设计对于需要严谨性和可解释性的领域应用来说,具有重要的现实意义。

2.1 技术架构特点

Knowledge Graph Studio 采用了一个创新的技术架构设计,它巧妙地将知识图谱、向量检索和 RAG 系统进行了有机整合。核心架构基于 NoSQL 数据库(如 MongoDB)构建,这种选择带来了显著优势:首先是模式灵活性,能够适应知识图谱动态演进的需求;其次是查询性能,支持大规模数据的高效检索;最后是可扩展性,便于横向扩展以应对数据量增长。

更值得关注的是,该平台实现了关系数据、向量存储和搜索功能的无缝集成。这意味着我们可以同时处理结构化的案件要素(如案件类型、时间地点、涉案人员等)和非结构化的案件材料,而不必在不同的系统之间来回切换。

这种架构设计带来了几个关键优势:

  1. 统一的数据视图

  2. 打通了结构化和非结构化数据的边界

  3. 支持多粒度的知识表示和检索

  4. 保证了数据的一致性和完整性

  5. 高效的检索机制

  6. 创新性地将三元组进行向量化处理

  7. 支持语义相似性和精确匹配的混合检索

  8. 查询性能较传统图数据库提升显著

  9. 灵活的扩展能力

  10. 模块化设计便于功能扩展

  11. 支持自定义索引和检索策略

  12. 可根据需求选择性启用功能组件

  13. 完整的生态支持

  14. 提供标准的 RESTful API

  15. 支持 Python SDK 快速开发

  16. 配备直观的 Web 操作界面

这种架构设计不仅解决了传统知识图谱系统在处理非结构化数据时的局限性,还为构建智能化的知识应用提供了坚实的技术基础。特别是在处理大规模异构数据时,其灵活性和扩展性的优势更加明显。

通过这样的架构设计,Knowledge Graph Studio 能够同时满足知识建模的严谨性要求和实际应用中对灵活性的需求,为知识图谱的构建和应用提供了一个理想的技术平台。

2.2 核心功能亮点

Knowledge Graph Studio 不仅仅是一个普通的知识图谱工具,更是一个面向 RAG 应用的原生知识图谱构建平台。通过将传统知识图谱技术与大模型时代的新需求有机结合,我们为用户提供了一套完整的知识表示和构建解决方案。实践证明,这种方案能够有效解决垂直领域知识构建的难点,显著提升大模型在专业领域的应用效果。

让我们一起来看看这个平台的核心功能亮点:

在当前大模型技术蓬勃发展的背景下,要真正实现大模型在垂直领域特别是公安执法等专业领域的落地应用,仅仅依靠通用大模型是远远不够的。

2.2.1 模块化的图谱构建

传统的知识图谱建设往往追求大而全,动辄耗时数月甚至数年,但实践表明这种方式难以适应当前快速迭代的业务需求。我们创新性地提出"小图谱、快迭代"的构建理念,支持团队围绕具体的业务场景或案件类型构建形式多样的专项知识图谱。

这种模块化的方法不仅大大降低了建设周期,更为重要的是能够快速验证和优化知识模型的效果。例如,在处理电信网络诈骗案件时,可以专门构建一个聚焦于诈骗话术、资金流转、团伙关系的小规模知识图谱,而不必等待一个完整的刑事案件知识图谱建设完成。

2.2.2 向量化的三元组技术

在传统知识图谱的基础上,我们引入了突破性的向量化三元组技术。这项创新将知识图谱的结构化优势与大模型的语义理解能力有机结合,使得知识检索不再局限于精确匹配,而是能够理解查询意图的上下文语义。

实践数据表明,相比传统的 Text2Cypher 方案,我们的向量化检索准确率提升了 2 倍以上。这一突破性进展意味着执法人员可以用更自然的语言描述查询需求,系统能够准确理解并返回相关的知识内容,大大提升了实际应用效果。

2.2.3 基于规则的实体解析

在实体识别和关系抽取这个知识图谱建设的关键环节,我们没有一味追求全自动化,而是基于多年实践经验,构建了一套人机协作的实体解析体系。系统支持执法人员基于专业知识定制解析规则,这些规则可以被保存和复用,随着使用不断优化完善。

这种方式既保证了抽取结果的准确性,又能够通过规则的积累不断提升系统的智能化水平。特别是在处理新型犯罪或者复杂案情时,人机协作的方式能够快速适应新的知识需求,保持系统的与时俱进。

2.2.4 API优先的设计理念

考虑到大模型应用的蓬勃发展,我们采用了 API 优先的架构设计理念。完整的 Python SDK 不仅方便与现有办案系统的无缝对接,更重要的是为 RAG(检索增强生成)应用提供了理想的知识基础设施。

通过将向量块(Vector Chunks)作为图谱中的一等公民,我们的平台能够为大模型提供更深层次的知识支持。这种设计让知识检索不再是简单的文本匹配,而是能够提供包含上下文的完整知识片段,显著提升了大模型在专业领域的表现。

知识图谱的构建是一个需要多方参与的过程,Knowledge Graph Studio平台提供了直观的可视化界面,让非技术背景的专业人员也能轻松参与知识建设。通过图谱共享和协作编辑功能,办案人员、技术人员和领域专家可以紧密配合,各自发挥所长。

这种协作机制特别适合公安执法领域的特点,因为真正有价值的知识往往来自于一线办案人员的实践经验。通过平台的协作功能,这些宝贵的经验可以被及时捕获和固化,形成可复用的知识资产。

2.3 在公安执法场景中的应用价值

在日常执法办案工作中,我们经常面临着案件信息碎片化、证据关系复杂、串并案分析困难等一系列挑战。Knowledge Graph Studio 正是基于对这些实际问题的深入理解,提供了一套系统化的解决方案。具体来说,它能够帮助我们应对以下三个核心场景:

2.3.1 案件知识的结构化表示

传统的案件信息往往分散在大量的文书、笔录和资料中,这给快速获取和分析带来了巨大挑战。通过 Knowledge Graph Studio:

  • 我们可以将非结构化的案件文书自动转化为规范的知识图谱结构

  • 准确刻画人、物、地、案件、时间等要素之间的复杂关联

  • 建立起案件信息的知识底座,为后续的智能分析和辅助办案提供坚实基础

  • 支持灵活的知识模型定制,适应不同案件类型的特殊需求

2.3.2 证据链条的智能梳理

在重大案件侦办过程中,证据关系错综复杂,常规方式难以厘清关键线索。Knowledge Graph Studio 提供:

  • 基于图谱的证据链可视化展现,直观呈现证据之间的逻辑关联

  • 智能识别证据链条中的关键节点和薄弱环节

  • 辅助办案人员快速发现证据体系中的漏洞和不足

  • 提供证据补强建议,有效提升案件质量

  • 支持证据链路径的多维度分析和推演

2.3.3 跨案件的关联分析

串并案分析是提升破案效率的关键,但传统方法往往依赖人工经验。Knowledge Graph Studio 创新性地:

  • 基于知识图谱的网络结构,自动发现案件间的潜在关联

  • 提供多层次、多维度的关系路径搜索和推理能力

  • 支持复杂条件下的案件特征匹配和相似性分析

  • 实现对作案规律、团伙网络等高价值信息的智能挖掘

  • 为串并案侦查和研判提供精准的数据支撑

通过这些功能的有机结合,Knowledge Graph Studio 不仅提升了办案效率,更为打造智能化办案新模式提供了有力支撑。在实践中,我们已经看到它在提升办案质量、加快办案进度等方面带来的显著成效。

2.4 与大模型的协同效应

Knowledge Graph Studio 的价值不仅在于其本身的功能,更重要的是它能够与大模型形成良性互补:

  • 利用大模型的自然语言理解能力辅助知识抽取

  • 通过知识图谱约束大模型的推理过程

  • 结合两者优势提供更准确的问答和决策支持

虽然 Knowledge Graph Studio 目前还处于开源的初期阶段,但它的设计理念和技术路线与我们的需求高度契合。随着社区的参与和工具的不断完善,我相信它将成为推动公安执法领域智能化转型的重要支撑。

特别值得一提的是,该项目采用 MIT 许可证开源,这意味着我们可以基于自身需求进行定制化开发,这对于公安行业的特殊性要求来说尤为重要。

通过对 Knowledge Graph Studio 的深入分析,更加坚定了我之前的判断:在垂直领域应用中,仅依靠大模型是远远不够的,必须要有领域知识图谱的支撑。而 Knowledge Graph Studio 的出现,为我们打通了从非结构化文本到结构化知识,再到智能应用的完整链路,这正是我们目前最需要的。

三、为什么开源 Knowledge Graph Studio?

在讨论技术细节之前,我们需要理解 WhyHow 团队选择开源的原因。开源不仅是一个技术决策,更是一种生态建设的战略选择。WhyHow 的目标是通过开放其知识图谱平台,促进社区协作和技术创新,使更多团队能够根据自身需求定制和扩展知识图谱的功能。

  1. 透明性与信任开源使得用户可以完全掌控平台的运行方式,从而更好地满足隐私保护和合规性要求。特别是在金融、医疗等对数据安全高度敏感的领域,开源平台提供了灵活的部署方案,使用户能够在自己的环境中直接运行系统,嵌入自定义的安全措施。

  2. 生态系统建设WhyHow 希望通过开源推动知识图谱技术的普及和应用。通过开放 API 和 SDK,开发者可以轻松将 KG Studio 集成到现有的系统中,从而构建更强大的基于知识图谱的解决方案。

  3. 激发创新开源平台为研究人员和开发者提供了实验和创新的空间。通过模块化设计,用户可以针对特定场景创建“小型图”,测试新的算法和数据表示方式。

四、技术架构:结合 NoSQL 的创新设计

KG Studio 的技术架构是其核心竞争力之一。它基于 MongoDB 构建,同时支持关系数据、向量存储和灵活模式,旨在满足大语言模型(LLM)系统、多代理 RAG(Retrieval-Augmented Generation)工作流和结构化知识表示的需求。

MongoDB 作为基础架构的选择有几个关键优势:

  • 文档模型灵活性:MongoDB 的文档模型允许存储复杂的嵌套数据结构,非常适合知识图谱中的多维数据表示

  • Schema 灵活性:支持动态模式,可以根据需要调整数据结构,这对于不断演化的知识图谱至关重要

这个技术架构展示了 KG Studio 在知识图谱和 AI 应用领域的深度思考:

  1. 技术选型的前瞻性:选择 MongoDB 作为基础设施不仅解决了当前需求,也为未来的扩展留下了空间。

  2. 架构的完整性:通过统一的平台支持传统关系数据、向量数据和灵活模式,满足了现代 AI 应用的多样化需求。

  3. 应用场景的覆盖:架构设计充分考虑了 LLM、RAG 和知识表示等主流 AI 应用场景,体现了产品的市场洞察力。

这样的架构设计使 KG Studio 能够在竞争激烈的市场中保持技术优势,同时为用户提供全面的解决方案。

4.1 多模存储架构

KG Studio 的存储层结合了以下技术:

  • 图数据库:用于存储实体和关系,支持高效的图查询和推理。

  • 向量数据库:支持语义相似性搜索,特别适合大语言模型生成的嵌入向量。

  • 关系数据库:管理元数据和系统配置,提供可靠的数据一致性。

  • 分布式缓存:提升查询性能,优化用户体验。

这种多模存储的设计,使得 KG Studio 能够同时处理结构化和非结构化数据,满足复杂知识图谱构建的需求。

4.2 语义检索与嵌入三元组

KG Studio 的查询引擎是其另一大亮点。通过嵌入三元组(Triple Embedding),平台能够在检索过程中综合考虑节点、关系和属性之间的语义关联。这种方法相比传统的节点检索更为精确,使得查询结果的准确率提升了两倍。

例如,在医疗场景中,查询引擎可以根据医生的诊断记录,提取与患者病史相关的所有节点和关系,并将其整合到一个语义上下文中,帮助医生快速做出决策。

4.3 模块化微服务架构

KG Studio 采用微服务架构设计,每个功能模块独立运行:

  • 数据接入与处理:支持多种数据源(如 CSV、JSON、PDF)和智能数据清洗。

  • 知识图谱构建:包括实体识别、关系抽取和属性管理。

  • 知识推理与分析:支持路径分析、规则推理和语义计算。

这种模块化设计使得系统具有高度的灵活性和可扩展性,用户可以根据具体需求选择性部署功能模块。

五、核心功能解析

5.1 数据接入与清洗

KG Studio 支持多种数据格式的接入,包括结构化数据(如数据库表)、半结构化数据(如 JSON)和非结构化数据(如文本和图片)。通过内置的智能数据清洗工具,用户可以快速完成数据去重、格式标准化和异常值处理,为后续的知识图谱构建打下坚实基础。

案例:在金融领域,KG Studio 可以从多个来源(如合同、财务报表)中提取数据,并自动清洗和整合,构建企业关联图谱。

5.2 知识图谱构建

  • 实体识别与消歧:通过深度学习模型识别文本中的实体,并将同义实体统一到一个节点。

  • 关系抽取:支持基于规则和深度学习的关系识别,用户可以根据具体场景定义自定义规则。

  • 属性管理:为每个实体和关系添加属性,丰富知识表示。

案例:在医疗场景中,KG Studio 可以将医生的诊断记录转化为时间序列知识图谱,帮助医生跟踪患者病情变化。

5.3 知识推理与语义分析

KG Studio 内置了强大的推理引擎,支持基于规则的推理和语义计算。例如,用户可以通过自然语言问题查询图谱,系统会返回与问题相关的节点、关系和嵌入向量块。

案例:在法律领域,KG Studio 可以通过多文档检索和推理,帮助律师快速找到相关法律条款和判例。

六、应用场景与价值

6.1 企业知识管理

通过构建企业知识图谱,企业可以将分散的文档和数据整合为一个统一的知识库,支持智能搜索和知识共享。例如,某大型制造企业利用 KG Studio 构建了设备维修知识库,大幅提升了维修效率。

6.2 医疗健康

在医疗领域,KG Studio 可用于构建患者病历知识图谱,帮助医生进行诊断支持和药物相互作用分析。例如,某医院利用 KG Studio 构建了药物知识图谱,显著降低了药物不良反应的发生率。

6.3 金融风控

通过构建企业关联图谱,KG Studio 可以帮助金融机构识别潜在风险。例如,某银行利用 KG Studio 构建了企业信用图谱,实现了精准的风险评估。

七、未来展望

在知识图谱技术快速发展和应用不断深化的背景下,我们需要以更开放、更前瞻的视角来规划产品的未来发展方向。基于对行业趋势的深入观察和市场需求的准确把握,我们认为知识图谱产品的发展将呈现出多元化、智能化和生态化的特征。未来,KG Studio 将重点在以下几个方向持续发力:

  1. 技术演进WhyHow 团队计划进一步优化 KG Studio 的性能,并引入更多 AI 能力,如自动化知识图谱构建和实时推理。

  2. 生态系统建设通过开放 API 和 SDK,WhyHow 希望吸引更多开发者和研究人员参与,共同推动知识图谱技术的发展。

  3. 场景拓展随着知识图谱技术的成熟,KG Studio 将在更多垂直领域(如教育、能源、物流)中发挥作用。

这三个方向的协同发展,将形成一个良性循环:技术创新驱动应用场景拓展,场景深化促进生态繁荣,生态建设反哺技术创新。通过这种螺旋式上升的发展模式,我们相信KG Studio将在未来的知识图谱领域占据更重要的位置,为用户提供更优质的服务。

如何学习大模型 AI ?

由于新岗位的生产效率,要优于被取代岗位的生产效率,所以实际上整个社会的生产效率是提升的。

但是具体到个人,只能说是:

“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。

这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

在这里插入图片描述

第一阶段(10天):初阶应用

该阶段让大家对大模型 AI有一个最前沿的认识,对大模型 AI 的理解超过 95% 的人,可以在相关讨论时发表高级、不跟风、又接地气的见解,别人只会和 AI 聊天,而你能调教 AI,并能用代码将大模型和业务衔接。

  • 大模型 AI 能干什么?
  • 大模型是怎样获得「智能」的?
  • 用好 AI 的核心心法
  • 大模型应用业务架构
  • 大模型应用技术架构
  • 代码示例:向 GPT-3.5 灌入新知识
  • 提示工程的意义和核心思想
  • Prompt 典型构成
  • 指令调优方法论
  • 思维链和思维树
  • Prompt 攻击和防范
  • …

第二阶段(30天):高阶应用

该阶段我们正式进入大模型 AI 进阶实战学习,学会构造私有知识库,扩展 AI 的能力。快速开发一个完整的基于 agent 对话机器人。掌握功能最强的大模型开发框架,抓住最新的技术进展,适合 Python 和 JavaScript 程序员。

  • 为什么要做 RAG
  • 搭建一个简单的 ChatPDF
  • 检索的基础概念
  • 什么是向量表示(Embeddings)
  • 向量数据库与向量检索
  • 基于向量检索的 RAG
  • 搭建 RAG 系统的扩展知识
  • 混合检索与 RAG-Fusion 简介
  • 向量模型本地部署
  • …

第三阶段(30天):模型训练

恭喜你,如果学到这里,你基本可以找到一份大模型 AI相关的工作,自己也能训练 GPT 了!通过微调,训练自己的垂直大模型,能独立训练开源多模态大模型,掌握更多技术方案。

到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?

  • 为什么要做 RAG
  • 什么是模型
  • 什么是模型训练
  • 求解器 & 损失函数简介
  • 小实验2:手写一个简单的神经网络并训练它
  • 什么是训练/预训练/微调/轻量化微调
  • Transformer结构简介
  • 轻量化微调
  • 实验数据集的构建
  • …

第四阶段(20天):商业闭环

对全球大模型从性能、吞吐量、成本等方面有一定的认知,可以在云端和本地等多种环境下部署大模型,找到适合自己的项目/创业方向,做一名被 AI 武装的产品经理。

  • 硬件选型
  • 带你了解全球大模型
  • 使用国产大模型服务
  • 搭建 OpenAI 代理
  • 热身:基于阿里云 PAI 部署 Stable Diffusion
  • 在本地计算机运行大模型
  • 大模型的私有化部署
  • 基于 vLLM 部署大模型
  • 案例:如何优雅地在阿里云私有部署开源大模型
  • 部署一套开源 LLM 项目
  • 内容安全
  • 互联网信息服务算法备案
  • …

学习是一个过程,只要学习就会有挑战。天道酬勤,你越努力,就会成为越优秀的自己。

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名大模型 AI 的正确特征了。

这份完整版的大模型 AI 学习资料已经上传优快云,朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

awesome-knowledge-graph:整理知识图谱相关学习资料 awesome-knowledge-graph 整理知识图谱相关学习资料,提供系统化的知识图谱学习路径。 目录 理论及论文 整体概念架构 随着知识图谱的发展,与之相关的概念也越来越多,在阅读论文时先准确的把握该论文所要解决问题处于的层级或者位置对于更好的理解论文也比较有帮助,在此对知识图谱的概念进行了总结整理,整体概念架构图如下图所示,后面的论文分类也按照该整体架构概念图从顶向下,从整体到细节的方式组织。 综述综合 大综述 Knowledge Graph Construction Techniques Review on Knowledge Graph Techniques (2016)[一篇经典的中文综述,适合入门。] Reviews on Knowledge Graph Research (2017)[清华大学李娟子老师的综述,十分经典,对知识图谱走入大众视野功不可没。] The Re 立即下载

相关推荐

知识图谱构建工具Protege

https://protege.stanford.edu/products.php#desktop-protege 官网不容易下载,这里提供一个,方便下载不了的同学。

knowledge-graph-studio:一个为RAG应用设计的知识图谱构建和管理平台

一个为RAG应用设计的知识图谱构建和管理平台,RAG原生支持:knowledge-graph-studio,支持各类数据转换。支持基于规则的实体解析、模块化图谱构建、支持从多种来源和格式的数据接入,可以处理大量数据和复杂查询,可以用于构建动态的图谱驱动的AI工作流。

Python_cocola的博客 1889

containerd镜像加速配置全解析:从host.toml到config.toml的演进与实践

本文全面解析了containerd镜像加速的配置方法,重点对比了传统的config.toml集中式配置与现代的host.toml模块化配置的演进与优劣。文章通过实战演示,详细指导如何为docker.io、registry.k8s.io等常见仓库配置host.toml加速,并提供了生产环境下的最佳实践、故障排查与性能优化建议,帮助用户显著提升镜像拉取效率与系统稳定性。

jenkins8butler的博客 698

知识图谱自动构建技术

知识图谱自动构建框架介绍

u013456823的博客 2221

CANoe数据回放实战:如何用Replay Block精准复现实车故障(附ECU数据处理技巧)

本文深入探讨了利用CANoe的Replay Block功能进行数据回放,以精准复现实车偶发性故障的实战方法。文章重点解析了从原始OBD日志中移除目标ECU数据、转换报文方向等核心数据处理技巧,旨在帮助工程师重构真实的网络测试环境,从而高效定位并解决复杂的ECU问题。

nnn11的博客 495

Ubuntu Server 24.04 安装 (超详细)

本文介绍最小化安装 Ubuntu Server的详细过程。

炀炀的专栏 1万+

【亲测免费】 knowledge-graph-studio:构建与管理的智能知识图谱平台

欢迎使用WhyHow知识图谱工作室(Knowledge Graph Studio)!这是一个易于创建和管理RAG原生知识图谱的平台。它具备基于规则的实体解析、模块化图谱构建、灵活的数据摄取以及以API为核心的架构设计。无论您处理的是结构化数据还是非结构化数据,无论是构建探索性图谱还是高度模式约束的图谱,这个平台都能提供可扩展性和灵活性,帮助您构建动态的图谱驱动AI工作流,适用于实验和大规模应用。 ...

gitblog_00383的博客 1445

Dify工作流构建案例:迭代驱动的多维深度搜索

为了克服这些挑战,我们可以设计一个能够智能协同内部知识库与外部互联网搜索,并最终由大型语言模型(LLM)进行深度整合与精准回答的高级工作流。

同名公众号:dify实验室 2291

AI知识图谱生成器终极指南:3步构建智能知识网络

AI知识图谱生成器(AI Knowledge Graph Generator)是一款革命性的工具,它能将枯燥的文本文档转化为生动的知识网络。想象一下,您只需要一篇文档,就能自动生成一个交互式的知识图谱,直观展示所有概念、实体及其复杂关系!🤩 ## 为什么您需要AI知识图谱生成器? 在信息过载的时代,我们每天都要处理大量文本数据——学术论文、市场报告、技术文档、会议记录……传统阅读方式已经无法

gitblog_00983的博客 1200

① Django手把手从零开发个人博客-前言

手把手教你从零开始玩转手把手教你从零开始玩转Django,全面学习并了解django的运行机制、开发全流程及线上部署。Django,全面学习并了解django的运行机制、开发全流程及线上部署。 专栏介绍 本套教程遵循Django的设计思想,开门见山,快速切入主题,拒绝拖沓,在实战中学习每一个知识点,提高学习的趣味性以及个人成就感,并且能快速将所学运用到实际项目中。 将从零手把手带着你一步步完成博客的每一个功能,通过实现博客文章列表页、文章详情页、作者页面等功能来学习和了解django的视图查询模块相关知.

轻编程的博客 513

华为OD最新机试真题-池化资源共享

摘要:该问题要求管理n台设备的资源池,处理资源申请和释放操作。申请操作需返回满足条件且剩余资源最少的设备ID,释放操作需将指定申请的资源归还。采用线段树数据结构维护各设备当前最大可用资源值,支持快速查询和更新。线段树实现了单点修改、区间最大值查询以及查找最左满足条件的节点功能。算法时间复杂度为O((n+m)logn),空间复杂度O(n),适用于大规模操作。提供了C++、Java和Python三种实现方案。

面试高手的博客 324

AI知识图谱生成器终极指南:5分钟构建智能知识网络

想要从海量文本中快速提取结构化知识吗?AI知识图谱生成器正是你需要的智能工具!这款强大的AI驱动系统能够将任何非结构化文档自动转换为交互式知识图谱,通过AI技术识别实体、提取关系,并构建直观的可视化网络,让你轻松理解复杂信息之间的关联。 ## 为什么你需要AI知识图谱生成器? 在信息过载的时代,我们每天都要处理大量的文档、报告和研究资料。传统的人工整理方式既耗时又容易遗漏重要关联。AI知识图谱

gitblog_00957的博客 340

ADB 安装教程:如何在 Windows、 Linux 上安装 Android Debug Bridge

本文介绍了在Windows和Linux系统上安装ADB(Android调试桥)的方法。对于Windows系统:1)从官网下载ADB工具并解压;2)通过命令提示符验证安装;3)配置环境变量以实现全局使用;4)再次验证全局ADB功能。Linux系统可通过包管理器直接安装(如Ubuntu使用apt,Fedora使用dnf),安装后同样需验证版本信息确认成功。两种系统安装完成后,都能通过"adb version"命令检查安装状态。

qq_53545309的博客 441

5分钟免费构建AI知识图谱:零代码实现文本智能关系可视化

你是否曾面对大量文本资料感到无从下手?想要快速理解复杂文档中的关键概念和隐藏关系?现在,一个革命性的开源工具——AI知识图谱生成器,让你在5分钟内将任何文档转化为直观的交互式知识网络。这个基于大语言模型(LLM)的智能工具,能自动从非结构化文本中提取实体和关系,生成专业级的可视化图谱,让知识结构一目了然。 ## 🚀 为什么选择AI知识图谱生成器? 传统文档分析需要人工阅读、标记、整理,耗时耗

gitblog_00023的博客 302

深度学习-161-Dify工具之对比使用工作流和聊天流生成图表可视化的html文件

分别使用聊天流和工作流进行数据分析结果的可视化,生成html文件。聊天流可以配置带记忆,这样就可以多次交互优化结果。

qq_20466211的博客 1709

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

5分钟构建AI知识图谱:智能提取文本关系可视化完整指南

在信息爆炸的时代,如何从海量文档中快速提取关键概念并理解复杂关系?AI知识图谱生成器正是解决这一难题的创新工具。这个开源项目利用大语言模型自动从非结构化文本中提取实体和关系,生成交互式可视化图谱,让知识结构一目了然。无论你是研究人员、学生还是内容创作者,都能在几分钟内将任何文档转化为直观的知识网络。 ## 📊 知识图谱可视化:让复杂关系一目了然 [![AI知识图谱可视化示例](https:/

gitblog_00396的博客 264

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

5分钟构建智能知识图谱:用AI自动发现文本中的隐藏关系

你是否曾面对冗长复杂的文档,感觉信息过载却难以理清关键概念之间的联系?现在,借助AI知识图谱生成器,你可以在短短5分钟内将任何文本转化为直观的交互式知识网络。这个开源工具利用大语言模型智能提取实体和关系,让复杂信息一目了然,无论是学术研究、商业分析还是个人学习,都能大幅提升效率。 ## 从混乱文本到清晰知识网络:AI的魔法转换 想象一下,你有一份关于工业革命的万字文档,传统阅读分析可能需要数小

gitblog_00616的博客 292

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

AI知识图谱构建实战:从非结构化文本到智能知识网络的完整实现

在信息过载的时代,如何从海量文本中提取结构化知识并发现隐藏关联成为技术挑战。AI知识图谱生成器通过大语言模型技术,实现非结构化文本到交互式知识网络的智能转换,为数据分析、学术研究和企业知识管理提供强大工具。 ## 🔗 核心架构与工作流程 ### 文本解析引擎:智能分块与实体提取 系统采用三阶段处理流程,将复杂文档转化为结构化知识。在`src/knowledge_graph/text_uti

gitblog_00960的博客 795

5分钟构建智能知识图谱:AI如何将复杂文档转化为可视化关系网络

在信息爆炸的时代,面对海量文档和复杂知识体系,你是否感到无从下手?AI知识图谱生成器正是解决这一难题的创新工具。这个开源项目利用大语言模型(LLM)自动从非结构化文本中提取实体和关系,构建出直观的交互式可视化知识网络。无论是技术文档、学术论文还是市场报告,都能在几分钟内转化为清晰的知识结构图。 ## 📊 问题:信息过载时代的认知困境 现代工作者每天需要处理大量文档,但传统阅读方式难以快速把握

gitblog_01166的博客 289

AI知识图谱生成器:5分钟从文本到交互式知识网络

你是否曾面对海量文档,想要快速理清其中的关键概念和关系?AI知识图谱生成器正是为你量身打造的智能工具!这个开源项目利用先进的大语言模型(LLM)技术,能够自动从任何非结构化文本中提取实体和关系,并生成直观的交互式知识图谱,让复杂信息一目了然。无论你是研究人员、学生还是内容创作者,都能在几分钟内将枯燥的文档转化为生动的知识网络。 ## 🎯 知识图谱的无限应用场景 **学术研究的智能助手**:想

gitblog_00896的博客 961

5分钟构建智能知识图谱:AI自动提取文本关系的完整指南

面对海量文本资料,你是否曾为梳理复杂概念关系而烦恼?现在,通过AI知识图谱生成器,你可以在短短5分钟内将任何文档转化为直观的可视化知识网络。这个开源工具利用先进的大语言模型技术,自动从非结构化文本中提取实体和关系,并生成交互式可视化图谱,让你轻松掌握复杂信息的核心结构。 ## 为什么你需要智能知识图谱工具? 在信息爆炸的时代,传统阅读和笔记方式已经难以应对复杂知识的梳理。无论是学术研究、商业分

gitblog_00323的博客 249

基于Graph RAG的本地知识图谱构建:让Markdown笔记库成为可交互的智能大脑

知识图谱作为结构化知识表示的核心技术,通过实体、关系及其属性的图结构,将非结构化信息转化为机器可理解和推理的语义网络。其构建原理通常涉及信息抽取、知识融合与图谱存储,能够揭示数据间深层的逻辑关联,超越传统向量检索仅依赖表面语义相似度的局限。这一技术的核心价值在于实现知识的关联性检索、推理路径可解释以及隐藏关系的发现,为智能问答、内容推荐和决策支持提供坚实基础。在个人知识管理领域,结合检索增强生成(RAG)技术,可将散落的本地文档(如Markdown笔记)转化为动态、可查询的私有知识库。开源工具Kwipu正是

weixin_33845881的博客 415

3分钟极速上手:AI知识图谱生成器如何让复杂文档一目了然

你是否曾面对长篇大论的技术文档、学术论文或商业报告感到无从下手?AI知识图谱生成器正是解决这一痛点的终极工具。这个开源项目利用先进的大语言模型技术,能够自动从任何非结构化文本中提取关键实体和关系,并生成交互式可视化图谱,让复杂的知识结构变得一目了然。无论你是研究人员、学生还是内容创作者,都能在几分钟内将枯燥的文字转化为生动的知识网络。 ## 🔍 为什么需要AI知识图谱? 在信息爆炸的时代,我

gitblog_00310的博客 311
上一篇: Dify 工作流-复刻吴恩达教授的 Agent Workflow 翻译
下一篇: Prompt“肿瘤“的克星:Language Hooks框架将工具与提示分离,增强LLM推理
Python_金钱豹
博客等级 码龄5年 1万+粉丝 2826原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值