GraphRAG的成本结构及优化建议

关注公众号“ONE生产力”,获取更多生产力资讯!

之前的文章我们介绍了微软的 GraphRAG(Graph Retrieval Augmented Generation,图检索增强生成)技术,它结合了知识图谱的精准性和大型语言模型的生成能力,从海量信息中挖掘有价值的见解至关重要,为我们提供了一种全新的方式来解锁非结构化数据的潜力。

但我们按照官方示例试用发现,虽然效果很好,但是价格实在贵得飞起,200页的小说花了11美元,传统RAG矢量化的成本不会超过0.01美元。那为什么GraphRAG如此昂贵呢?今天我们将深入探讨 GraphRAG 的成本构成,分析关键因素,并提供一些优化成本的实用建议。

GraphRAG的主要成本

1、构建图表:包括节点(关键实体)和边(实体间关系)的创建,这是成本的主要来源,包括:

  1. 计算资源成本: GraphRAG依赖于强大的计算资源,这些资源包括CPU、GPU以及内存使用。这些计算资源的成本会随着数据集的大小、模型的复杂度和查询频率的增加而增加。对于需要处理大量数据或提供快速响应的场景,计算成本将是一个重要的开支。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值