深度学习模型部署RV1126准备工作(三)——从零学习迅速上手,将.pth 模型文件转换为.onnx

模型部署RV11126的流程大致为:训练得到.pth模型、pth2onnx、onnx2rknn,最后在边缘计算设备上完成部署,本文从初学者的角度为模型部署学习者提供一些模型格式转化的意见与经验。

一、所需条件

二、代码详解

1、调用相关文件

import torch.onnx
from torchvision import models
from onnxsim import simplify
import onnx

2、pytorch的推理模型加载

torch_model = torch.load("/home/xl/thinclient_drives/xd/Awesome-Backbones-main/Awesome-Backbones-main/logs/ResNet/2024-10-30-15-23-14/Val_Epoch056-Acc69.602.pth",
                         map_location='cpu')  # pytorch模型加载
model = models.resnet50()
# model.load_state_dict(torch_model)
batch_size = 1  # 批处理大小
input_shape = (3, 224, 224)  # 输入数据,改成自己的输入shape

3、开启模型的评估模式

model.eval()

4、设置onnx导出地址,并导出onnx模型

x = torch.randn(batch_size, *input_shape)  # 生成张量
export_path = "../output/resnet.onnx"
export_onnx_file = export_path  # 目的ONNX文件名
torch.onnx.export(model,
                  x,
                  export_onnx_file,
                  opset_version=12,
                  do_constant_folding=True,  # 是否执行常量折叠优化
                  input_names=["input"],  # 输入名
                  output_names=["output"])  # 输出名

5、简化onnx模型

# 加载导出的 ONNX 模型
onnx_model = onnx.load(export_path)

# 简化模型
simplified_model, check = simplify(onnx_model)

# 保存简化后的模型
onnx.save_model(simplified_model, "../output/resnet_simplified.onnx")

三、完整示例代码

import torch.onnx
from torchvision import models
from onnxsim import simplify
import onnx
#from models.resnet import resnet50 as model

torch_model = torch.load("/home/xl/thinclient_drives/xd/Awesome-Backbones-main/Awesome-Backbones-main/logs/ResNet/2024-10-30-15-23-14/Val_Epoch056-Acc69.602.pth",
                         map_location='cpu')  # pytorch模型加载
model = models.resnet50()
# model.load_state_dict(torch_model)
batch_size = 1  # 批处理大小
input_shape = (3, 224, 224)  # 输入数据,改成自己的输入shape

# #set the model to inference mode
model.eval()

x = torch.randn(batch_size, *input_shape)  # 生成张量
export_path = "../output/resnet.onnx"
export_onnx_file = export_path  # 目的ONNX文件名
torch.onnx.export(model,
                  x,
                  export_onnx_file,
                  opset_version=12,
                  do_constant_folding=True,  # 是否执行常量折叠优化
                  input_names=["input"],  # 输入名
                  output_names=["output"])  # 输出名
#                   dynamic_axes={"input":{0:"batch_size"},  # 批处理变量
#                                  "output":{0:"batch_size"}})


# 加载导出的 ONNX 模型
onnx_model = onnx.load(export_path)

# 简化模型
simplified_model, check = simplify(onnx_model)

# 保存简化后的模型
onnx.save_model(simplified_model, "../output/resnet_simplified.onnx")

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值