JWFD开源工作流-矩阵大模型的最新进展

文章讲述了在JWFD设计器中实现的103节点、186连接的拓扑图,利用矩阵建模压缩至36K数据量。然而,当尝试处理大模型时,自建矩阵引擎的递归算法导致内存溢出,提示需优化算法以应对大规模神经网络图计算。

在JWFD的设计器上面,实现了103个节点,186个连接的拓扑图模型,使用矩阵建模,整个拓扑图的数据容量才36K,大概计算了一下,100万个节点150万连接数的矩阵模型不会超过300MB,在一个工作站级别的服务器上面建立人脑的神经网络图是完全可以的

另外,使用自建的矩阵引擎算法,跑这个拓扑图的时候,由于采用传统的递归算法,由于没有加入节点访问控制函数,导致出现内部子循环体,内存被无效循环消耗,出现溢出错误,说明大模型的计算过程不能够用传统的递归算法。。。

下面是这个拓扑图的模型图

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值