pytorch加载模型时报错

本文详细解析了PyTorch加载预训练模型时遇到的RuntimeError错误,并提供了两种解决方案:一是通过添加torch.nn.DataParallel模块来匹配模型结构;二是通过创建一个不包含'module.'前缀的新字典,从而解决预训练模型与当前模型结构不一致的问题。
[转自]https://www.lizenghai.com/archives/4610.html

pytorch加载模型时报错

RuntimeError: Error(s) in loading state_dict for DataParallel:

Missing key(s) in state_dict: “module.backbone.layers.0.stage_1.layers.0.weight”,

这是因为加载的预训练模型之前使用了torch.nn.DataParallel(),而此时没有使用,所以可以加上该模块或者去掉。

加上torch.nn.DataParallel()模块

model = torch.nn.DataParallel(model)

cudnn.benchmark = True

创建一个没有module.的新字典,即将原来字典中module.删除掉

model.load_state_dict = torch.load(‘model/path’)
create new OrderedDict that does not contain module.

from collections import OrderedDict

new_state_dict = OrderedDict()

for k, v in state_dict.items():
	 # remove `module.
	 name = k[7:] 
     new_state_dict[name] = v
model.load_state_dict(torch.load(new_state_dict))

model.load_state_dict({k.replace(‘module.’,”):v for k,v in torch.load(‘model/path’).items()})

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值