当前位置: 首页 > news >正文

yolov10 瑞芯微RKNN、地平线Horizon芯片部署、TensorRT部署,部署工程难度小、模型推理速度快

  特别说明:参考官方开源的yolov10代码、瑞芯微官方文档、地平线的官方文档,如有侵权告知删,谢谢。

  模型和完整仿真测试代码,放在github上参考链接 模型和代码。

  yolov8、v9还没玩热乎,这不yolov10又来了,那么部署也又来了。

1 模型和训练

  老规矩,训练代码参考官方开源的yolov10代码。

2 导出 yolov10 onnx

   导出onnx增加以下几行代码:
在这里插入图片描述

        # 导出onnx增加y = []for i in range(self.nl):t1 = self.one2one_cv2[i](x[i])t2 = self.one2one_cv3[i](x[i])y.append(t1)y.append(t2)return y

增加保存onnx代码:

在这里插入图片描述

        print("===========  onnx =========== ")import torchself.model = self.model.fuse()dummy_input = torch.randn(1, 3, 640, 640)input_names = ["data"]output_names = ["reg1", "cls1", "reg2", "cls2", "reg3", "cls3"]torch.onnx.export(self.model, dummy_input, "./weights/yolov10_zq.onnx", verbose=False, input_names=input_names, output_names=output_names, opset_version=11)print("======================== convert onnx Finished! .... ")

  修改完以上两个地方,运行推理脚本(运行会报错,但不影响onnx文件的生成)。

from ultralytics import YOLOv10# 推理
model = YOLOv10(r'./weigths/yolov10n.pt')
results = model(task='detect', mode='predict', source='./test.jpg', line_width=3, show=True, save=True, device='cpu')

增加这一行后,对其中C2fCIB模块进行重参数化(这也是文章中一个点)
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
重参数化前后模型的变化
在这里插入图片描述

3 yolov10 onnx 测试效果

pytorch效果
在这里插入图片描述
onnx效果
在这里插入图片描述

4 时耗

模型输入640x640,检测类别80类

tensorRT 时耗(显卡 Tesla V100、cuda_11.0)
在这里插入图片描述
rk3588时耗
在这里插入图片描述
本示例用的是yolov10n,模型计算量6.7G,看到这个时耗觉得可能是有操作切换到CPU上进行计算的,查了rknn转换模型日志确实是有操作切换到CPU上进行的,对应的是模型中 PSA 模块计算 Attention 这部分操作。

在这里插入图片描述

5 rknn 板端C++部署

  C++完整部署代码和模型示例参考


http://www.mrgr.cn/news/3960.html

相关文章:

  • BaseCTF2024 WP (主要为Rev)
  • 简单的jar包重打包Failed to get nested archive for entry 报错处理
  • 【数据结构篇】~双向链表(附源码)
  • Python爬虫:网页脚注与引用的智能捕手
  • 科大讯飞飞凡计划面经(2024年秋招新出炉)
  • Milvus向量数据库-磁盘索引简介
  • SQL与机器共舞:探索数据的智能集成艺术
  • shaushaushau1
  • ArcGIS10.8 安装教程
  • C++ //练习 18.28 已知存在如下的继承体系,在VMI类的内部哪些继承而来的成员无须前缀限定符就能直接访问?哪些必须有限定符才能访问?说明你的原因。
  • AIGC 与 ChatGPT 的区别与联系
  • 使用 Python 绘制词云图的详细教程
  • JetBrains CLion 2024.2 (macOS, Linux, Windows) - C 和 C++ 跨平台 IDE
  • 【前端学习】搭建Vue项目
  • 如何为您的专用IP地址选择正确的IP SSL证书
  • 【三维语义分割模型】PAConv
  • 机械学习—零基础学习日志(如何理解概率论4)
  • Java笔试面试题AI答之线程(3)
  • DN专业3D图形制作软件win/mac软件安装下载(附下载链接)
  • Go 语言切片(Slice)