【20201211期AI简报】目标检测可达40fps! 标称2.0TOPS的RV1126性能评估实测

RV1126与RV1109 AI系统设计概要(一部分) 介绍RV1109/1126的基本参数,以及电源电路设计,第一部分。 未完待续。 阅读详情

导读:本期为 AI 简报 20201211 期,将为您带来 8 条相关新闻,有趣有料~

本文一共 2500 字,通篇阅读结束需要 4~7 分钟

1. 目标检测可达40fps! 标称2.0TOPS的RV1126性能评估实测

知乎者也:

https://zhuanlan.zhihu.com/p/331689816

应朋友的委托,希望我来帮忙评估一下RV1126(RV1109)的AI性能。这两款芯片是pin2pin的,RV1109的算力为1.2Tops,RV1126的算力为2.0Tops。参与评估的网络为典型的Resnet50。rv11xx的sdk是淘宝上花25 RMB买的(2020-11-24release的版本),评估板也是淘宝上淘的一块人脸识别面板机,里面用的是rv1126的soc。

还是老样子,我们将porting部署进行一下流程拆分:

1、推理图优化

2、int8模型量化

3、native层性能评估业务代码。

交叉编译后push到板子上进行了性能评估,resnet50的网络,输入为224x224,100次推理的平均耗时为25ms左右,基本跟rk提供的profile的性能文档可以对上。

2. AI消除马赛克,GitHub开源项目上线三天收获近7000星

Github: 

https://github.com/beurtschipper/Depix

最近,一个名为 Depix 的 GitHub 项目爆火,上线三天 star 量已经高达 6.9k。项目作者 Sipke Mellema 是一名信息安全顾问。

Depix 能够从像素化图像截图中恢复原图中包含的文字密码。该项目适用于使用线性方框滤波器(linear box filter)创建的像素化图像。如上图所示,项目作者给出了像素化图像、恢复之后的效果和原图的对比结果。

马赛克打得够严实了,不过 Depix 还是基本解读出了被隐藏的信息。

使用 Depix 从像素化图像截图中恢复文字密码,操作也比较简单:

  • 从截图中分割出矩形像素化 block;

  • 在具有相同字体设置(包括文本大小、字体、颜色、hsl)的编辑器中,粘贴待处理字符的德布鲁因(De Bruijn sequence)。

  • 给该序列截图,尽可能使用和像素化图像相同的截图工具。

  • 执行命令:

1python depix.py -p [pixelated rectangle image] -s [search sequence image] -o output.png

3. 爆火上热搜!AI『复活』八代帝王众生相

视频链接:

https://www.bilibili.com/video/BV13y4y1B76V?from=search&seid=8707917894759309118

坐拥“后宫佳丽三千”的皇帝到底长啥样?

最近,凭借修复老北京影像火爆全网的硬核Up主大谷@Spitzer,再次借助人工智能技术修复了历代皇帝的人物画像。不仅让八位皇帝的相貌活灵活现地展现在我们面前,而且还加入人脸识别用能,用AI匹配了最佳扮相的明星脸…….

昨晚这条视频一发布便冲上了微博热搜,目前全网转发浏览量已近千万,那么#人工智能还原的明清皇帝#到底长啥样?

乾隆最帅,老朱家的都很富态。

4. 53年来国内唯三,MindSpore加速昇腾芯片论文获国际顶会MICRO最佳论文提名

“研究芯片光砸钱不行,要砸数学家、物理学家。”

任正非今年5月在接受《科技日报》专访时如是说。据任正非透露,华为已拥有700多名数学家。

最近,来自郑州数学工程与先进计算国家重点实验室的赵捷老师与华为MindSpore团队合作,凭借着在基础数学上的能力,解决了一个AI芯片优化的重要问题,获得了顶级学术会议MICRO 2020的最佳论文提名,MICRO是计算机体系结构领域的国际顶级会议,这也是中国团队53年第3次入围该大会的最佳论文提名。

这篇论文主要研究了如何优化在AI芯片上的程序编译,尽可能的“榨干”AI芯片的性能,不仅支持对华为自研的昇腾910芯片,也支持现在主流的NVIDIA A100/V100 GPU,今后还会支持更多硬件。

在CPU上,其方法相较PolyMage和Halide分别平均性能提升了20%和33%。在GPU上,其方法比Halide提供了17%的平均性能改进。在AI芯片华为昇腾910上,该论文提出的方法可将ResNet-50模型整个执行时间提升16%。

5. 这三篇目标检测论文刚刚开源了!

2020年即将结束,回望这一年,有哪些亮眼的目标检测论文给你带来启发或者帮助呢?

上半年的DETR掀起了基于Transformer的CV论文浪潮,不少人调侃留给Transformer攻克的CV方向不多了,比如检测、分割、深度估计、车道线检测等领域均被"染指"。同在上半年,还有YOLOv4、YOLOv5等不错的工作。**

下半年的好工作也不少,比如本文介绍的刚开源的Deformable-DETR,还有近期发布的Sparse R-CNN和DeFCN等工作。

这三篇目标检测论文刚刚开源了

  • AutoAssign

  • Deformable DETR

  • DeFCN

6. 全面超越BN/GN/LN/IN!归一化新方法BGN,解决因Batch Size大小带来的训练不稳定问题

Paper: 

https://arxiv.org/abs/2012.02782

深度卷积神经网络(DCNNs)训练起来既困难又耗时。规范化是一种有效的解决方案。在以往的归一化方法中,批处理归一化(BN)在大、中批量处理中表现良好,对多个视觉任务具有很好的通用性,但在小批量处理中,其性能下降明显。

作者实验发现在超大Batch下BN会出现饱和(比如,Batch为128),并提出在小/超大Batch下BN的退化/饱和是由噪声/混淆的统计计算引起的。因此,在不增加新训练参数和引入额外计算的情况下,通过引入通道、高度和宽度维度来补偿,解决了批量标准化(BGN)在小/超大Batch下BN的噪声/混淆统计计算问题。

利用GN中的组方法和超参数G来控制统计计算所使用的特征实例的数量,从而对不同批量提供既无噪声也不混淆的统计量。实验结果证明BGN优于BN、IN、LN、GN以及PN;

该方法在图像分类、神经结构搜索(NAS),对抗的学习,小样本学习以及无监督学习领域适应(UDA)都有很好的性能、鲁棒性。例如,在ImageNet上训练设置Batch=2进行训练ResNet-50,BN的Top1准确率为66.512%,BGN的Top1准确率为76.096%,精度有显著的提高。

7. 狂揽2500星,开源十六进制编辑器登顶GitHub热榜

Github:

https://github.com/WerWolv/ImHex

者也:

https://zhuanlan.zhihu.com/p/59119723

常用的十六进制编辑器有 Bless Hex Editor、GNOME Hex Editor、Okteta 等。和大多数编辑器一样,人们对于十六进制编辑器的要求包括功能强大、可定制性、界面美观。

近日,GitHub 上开源了一款名为 ImHex 的十六进制编辑器,对视力极其友好,上线 5 天,狂揽 2500 star。

截至到12月11日,Star 已经涨至 5.3k

项目作者在 readme 文件中首先介绍了 ImHex 编辑器实现的功能特性。

8. Github黑暗模式正式发布,Reddit直接飙至4k高赞

Dark mode 设置地址:

https://github.com/settings/appearance

在 GitHub Universe 2020上,其中发布的新特性中最大的改变就是正式推出了黑暗模式,同时还宣布了针对公司的 GitHub 赞助功能,允许公司对关心的开源项目进行投资等。

你是否有过打开电脑被晃「瞎」的感觉?

最近,在GitHub Universe上,一款「暗黑」模式被推了出来。

官方自称:「2020年宇宙新功能」。

今年GitHub大会新功能主要有:

  • Dark mode

  • GitHub Sponsors for Companies

  • Auto-merge pull requests

  • Discussions

  • Actions

你可以添加微信17775982065为好友,注明:公司+姓名,拉进 RT-Thread 官方微信交流群!

RT-Thread


让物联网终端的开发变得简单、快速,芯片的价值得到最大化发挥。Apache2.0协议,可免费在商业产品中使用,不需要公布源码,无潜在商业风险。

长按二维码,关注我们

点击阅读原文,报名开发者大会

你点的每个“在看”,我都认真当成了喜欢

【RV1126 学习】SDK/ U-Boot/kernel/rootfs 编译学习 对RV1126的编译过程学习总结 阅读详情

相关推荐

RV1126开发之基础知识总结

MIPI 摄像头凭借高速、低功耗和抗干扰的特性,成为移动设备和嵌入式场景的主流选择;而其他接口(如 USB、GigE Vision、Camera Link 等)则根据传输距离、带宽需求、成本和应用场景的不同,在工业、医疗、消费电子等领域发挥作用。选择摄像头接口时,需结合设备尺寸、画质要求、传输距离和系统兼容性综合考量。

qq_28576837的博客 3717

【正点原子Linux连载】第三章 RV1126开发环境搭建 摘自【正点原子】ATK-DLRV1126系统开发手册

1)实验平台:正点原子RV1126 Linux开发板 2)平台购买地址:https://detail.tmall.com/item.htm?id=692176265749 3)全套实验源码+手册+视频下载地址: http://www.openedv.com/thread-340252-1-1.html3.1 rv1126的环境配置 在上章节里面我们已经安装好Ubuntu,此时的Ubuntu还是不能做开发的,因为还有很多环境和软件没有安装,所以要先安装环境,这里笔者已经把所有坑都填完了。跟着下面一步一步走就行

weixin_55796564的博客 5914

RV1126芯片概述

RV1126芯片为机器人提供了强大的视觉、语音等多模态感知能力,以及高效的计算和处理能力,有助于提升机器人的智能化水平和自主运行能力,推动机器人在更多领域的应用和发展。

w1820020635的博客 4177

瑞芯微RV1126 Camera调试记录

rv1126 camera处理流程

weixin_46985286的博客 1万+

Windows 必看!OpenClaw 一键安装教程|告别报错,一次成功不踩坑

OpenClaw 完整安装与配置的全流程教程

m0_70389289的博客 1085

zemax光线光扇图

通过入瞳某一坐标(PX,PY)的光线在像面上有唯一的位置(EX,EY),以EX,EY为纵坐标,以PX,PY为横坐标,分别建立坐标系,把通过入瞳的光线都在坐标系里描点就得到了光扇图。对于视场内任意一点,取其子午面内的光线,以光线在光阑面上的透射点坐标为横坐标,同时以该光线在像面上的坐标为纵坐标,描出所有点,构成的图形即为子午面光扇图。在焦点位置,曲线的斜率为0,也就是说,不管入射时的横坐标(光阑面上的位置)是多少,离轴多远,都将汇聚在焦点处。此时,子午面和弧矢面有不同的分布,两条曲线不重合。

fendoudecheng的博客 8096

Rockchip RV1126 模型部署(完整部署流程)

YOLO-V5在RV1126部署全流程(环境配置,模型转换,C++模型推理,芯片运行),验证有效。

DAOCHI 1万+

告别GIS软件!用R语言ggplot2+ggmapcn绘制出版级世界地图(附5种投影对比图)

本文提供了一份完整的实践指南,教你如何利用R语言及其强大的ggplot2生态系统,结合ggmapcn包,绘制出出版级的世界地图。文章详细对比了五种经典地图投影(如摩尔维德、罗宾森投影)的代码实现与视觉差异,并讲解了如何添加比例尺、指北针等专业元素,最终导出高清PDF,实现从数据分析到专业可视化的全流程代码化操作,彻底告别传统GIS软件。

p5l2m9n4o6q的博客 406

瑞芯微电子RV1126芯片环境搭建&SSD模型转换指南

回到SSD-mobilenet_tf的训练代码,在ssd_meta_arch.py中添加如下代码,在research目录下执行python setup.py install,运行model_main.py(即训练,训练时有生成),即可生成保存prior_boxes的文件box_priors.txt。在索书号场景下,有1917个prior_box。故翻了翻陈年的笔记,找到当年使用瑞芯微电子出的一款芯片RV1126的使用笔记,当时拿到的是一款基于RV1126的IP摄像头,在此整理记录下。OK,让我们开始吧。

zzq1989_的专栏 2947

永磁同步电机ADRC控制策略优化:从理论到Simulink仿真实践

本文深入探讨了永磁同步电机自抗扰控制(ADRC)策略的优化与实践。针对传统PID在动态响应、抗扰及噪声抑制方面的不足,详细解析了ADRC三大核心组件——跟踪微分器(TD)、扩张状态观测器(ESO)与非线性状态误差反馈(NLSEF)的工作原理。通过手把手的Simulink仿真教程,展示了从算法编写、模型搭建到参数整定的完整流程,并进阶实现了位置-速度双环ADRC协同控制,为高性能电机伺服系统设计提供了从理论到实践的清晰指南。

root9的博客 412

台达B3伺服电机485通讯的调试过程

最近上了一项目,没办法直接把B3伺服接到PLC上去,怎么办?偶说试下直接电脑通过100多米的485线控制好了,定型前的测试就这样展开了。 1、焊CN1口 如果不安装CN1,是开不了机的,要报很多错误,比如SERV EMG ALERT, 上限报警,下限报警什么的,怎么办?直接焊好CN1头子吧,烦了点,但是必要的。 主要接的是11,9,10,32,31,30几个脚,按照图上连接好就是了。 2、 接线路 按照上面的图,接上伺服电机线,编码器线,电源线,包括限位常闭开关、485连线等,就完..

shidong01的博客 1万+

[智能AI摄像头]rv1126搭建rknpu开发环境并添加opencv库、更新板端rknpu驱动

rv1126搭建rknn_toolkit以及rknpu开发环境并更新板端rknpu驱动为1.7.3同时添加opencv库

嵌入式人工智能相关 5312

Android 13 录音APK在后台无数据的处理

未获取到录音数据

chenchen4310的博客 1182

RV1126边缘计算AI盒子,支持4-6路1080p视频,2T 算力

生产出来到成品组装的过程中,可能经历了不同的时间及环境,务必要做好贴件前的核心板除湿干燥处。由于多核高性能处理器全负荷运行时发热比较大,实际使用产品时请务必考虑系统级别的散热处理。由于模块配合不同的底板特性,生产贴料时的具体过炉温度设定因产品而异,请生产时具体评估;边缘计算主板外围接口丰富,拥有超强扩展性,可广泛应用在智慧安防。由于参考设计有不定期更新,请通过正规渠道索取相关参考设计资。混合运算,完美兼顾性能、功耗及运算精度,支持。网、智慧城市、智慧交通,智慧医疗等。留六轴传感器,重力,陀螺仪。

YEYUANGEN的专栏 3658

算法笔记 经典取石子游戏总结 博弈论

经典取石子游戏总结 1.巴什博弈 有一堆石子共n个,A和B轮流取,A先取。每次最少取1个,最多取m个,先取完者获胜(即没有石子取的人失败)。A与B都足够聪明,问A能否获胜。 结论:当n%(m+1)!=0时A必胜,否则必败。 2.斐波那契博弈 有一堆石子共n个,A和B轮流取,A先取。每次最少取1个。第一次不能取完。从第二次开始,每个人取的石子数至少为1,至多为前一个人取的石子数的2倍。先取完者获胜。...

CraigMC的博客 2935

100天精通Python(基础篇)——第2天:基础语法详解(标识符、保留字、注释与代码结构)

100天精通Python(基础篇)——第2天:基础语法详解(标识符、保留字、注释与代码结构)

努力让自己发光,对的人才能迎着光而来 34万+

[智能AI摄像头]RV1126适配3inch mipi屏幕

[智能AI摄像头]RV1126适配3inch mipi屏幕,从硬件驱动板到软件适配

嵌入式人工智能相关 3539

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

瑞芯微推出RV1126性能/案例大评测

瑞芯微

IClance999的博客 1万+

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

【智能硬件】RV1126 CE 板软件指导

一、 RV1126 CE 板上的 Buildroot 和 Debian RV1126 CE Boards 软件支持两种操作系统:Buildroot 和 Debian。 RV1126 CE 板的 Debian 映像基于 Debian 9 版本构建。 二、 安装 Buildroot & Debian 当前支持在 RV1126 CE 板上安装 Buildroot 或 Debian 映像的方法: • 通过 USB 数据线和 Rockchip Flash 下载工具从主机安装映像 以...

梦想是要有的,万一实现了呢! 3662

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

RV1126 NO.13:RV1126的视频编码模块的讲解

这个结构体主要设置码率控制属性,这其中包括:enRcMode、stH264Cbr(H264的CBR码率控制模式)、stH264Vbr(H264的VBR码率控制模式)、stH264Avbr(H264的AVBR码率控制模式)、stMJpegCbr(MJPEG的CBR模式)、stMJpegVbr(MJPEG的VBR模式)、stH265Cbr(H265的CBR码率控制模式)、VENC_CHN_ATTRS是管理整个VENC模块的管理结构体,这里面它包含三个VENC子类结构体:分别是VENC_ATTR_S结构体(

2301_79379609的博客 1272

瑞芯微RV1126——人脸识别框架分析

项目核心是在Linux平台上利用摄像头采集人脸,并进行人脸识别。这个项目使用的是FFMPEG+OPENCV+虹软框架完成。FFMPEG的主要工作是负责采集摄像头的数据并把摄像头数据发送给opencv。Opencv的主要工作则是把摄像头数据转换成矩阵数据。虹软的主要功能则是利用Opencv的数据进行数据检测和识别并且和人脸数据库进行比较,如果识别成功则显示这个人的姓名,并把数据显示出来。

weixin_45257157的博客 2803

【瑞芯微RV1126(板端摄像头图像数据采集)】①使用RV1126交叉编译工具链交叉编译opencv,c++代码直接调用VideoCapture 采集图像数据

交叉编译是一种将软件在操作系统上进行编译,但在另一种不同的操作系统或架构上运行的技术。本文将使用Ubuntu作为主机操作系统,并将OpenCV编译为在另一个目标平台上运行的库。 经过测试,rv1126开发板上的opencv似乎安装的不够完整,没法使用高级的opencv类,导致想调用VideoCapture 函数读取摄像头数据进行模型推理失败(ps:嫌交叉编译opencv麻烦的,也可以使用Linux操作系统中用于支持摄像头和视频设备的框架:v4l2。可以比较方便的读取摄像头数据,不需要做什么配置,教程直接参考

海风的博客 5912

瑞芯微RV1126开发板HDMI输入输出,海图rv1126开发板测评

最近作者这里发现了一款比较有意思的rv1126开发板,海图的rv1126定制开发板,这款板卡竟然是HDMI输入输出的,这个在市场上一般是比较少见的啊。,如串口驱动、以太网卡驱动、USB 2.0 host驱动、HDMI输出驱动、eMMC驱动、DDR驱动等,还是不错的,相关资料提供的也算全面,按照测试指南上的说明,也能一次调通,总体比较满意。有2TOPS算力,这些大家都知道的就不详细叙述了,这个板卡。板卡支持从EMMC启动,内置linux 4.9版本的内核,视频输出、网口、USB、音频输入、RS232等,

群微的博客 2451

RV1126 设计方案

支持Debian/Buildroot/Ubuntu/等系统。LPDDR4/4X,最高可选4GB。40mm*60mm 6层板通孔。eMMC,最高可选64GB+

china_chip的博客 1719

【瑞芯微RV1126(板端摄像头图像数据采集)】②使用v4l2视频设备驱动框架采集图像数据,按键拍照并显示

本系列的目的是,不仅仅将能够进行图片推理的模型部署于板端,还提供了两种摄像头数据采集的方法,集成到自己的深度学习推理代码之后,可以根据应用场景的不同实现按键控制拍照推理或者是实时推理并显示。本系列第一篇:本系列第二篇:本文本系列第三篇:在本系列第三篇博客中,最后我有提到,读取摄像头数据来进行实时推理或者拍照推理,在那里提供了两种思路:①按照这系列的第一篇博客,搭建环境,调用opencv的高级函数采集图像数据;

海风的博客 4987

瑞芯微方案:RV1126定制开发板方案定制

RV1126 核心板是常州海图电子科技有限公司推出的一款以瑞芯微 RV1126处理器为核心的通用产品,其丰富的设计资源、稳定的产品性能、强力的设计支持,为客户二次开发快速转化产品提供强有力的技术保障。RV1126 核心板集多种优势于一身,具有强劲的处理器性能以及强悍的视频处理、视频分析与编解码能力。

1199
上一篇: RT-Thread新版入门系列教程(名师带路,不走弯路)
下一篇: 预告:RDC擂台赛|享受抓虫子的乐趣,你在最快的时间内能识别多少Bug?
RT-Thread物联网操作系统
博客等级 码龄6年 2万+粉丝 392原创
评论 4
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值