百度开源了一款神器!10万图片轻松识别!

使用LLaVA模型实现以文搜图和以图搜图 使用LLaVA模型实现以文搜图和以图搜图实战 阅读详情

说到图像识别,有些人可能会一头雾水,其实图像识别早已经成熟地应用在了各行各业。比如,正在进行中的双十一全民剁手节,相信很多小伙伴们都在某宝上解锁过以图搜图购物;越来越先进的自动驾驶道路街景识别;工业制造中不同组件的缺陷识别检测等等。

8e676033bd01152b120a917120b1cca1.gif

有的开发者看到这里可能会心存疑问:上面所说的场景为什么不直接用图像分类或者目标检测算法实现呢?

别急,让我们看看下面这些实际的产业难题你就会恍然大悟:

1.【品类更新频率高】像新零售这种行业,新品几乎都是按小时级别在更新!

2.【目标区分难度大】细分类差别极其细微,实际图像角度多变刁钻!

3.【算法复杂速度慢】业务上线预测速度要求极高,在闸机前不可能还需要等!

4167909d761532520abb82f28cb51e0e.png

一个优秀的图像识别系统就是上述产业难题的最佳解决方案,需要综合目标检测、图像分类、度量学习、图像检索等多重技术,然而对一些开发者来说,确实存在较高的开发门槛。而近期,飞桨推出了一个全开源、轻量级图像识别系统PP-ShiTu,完美解决上述产业落地中的重重难点,CPU上仅需0.2s轻松识别十万类,而且十分简单易用。

PP-ShiTu技术报告地址:

http://arxiv.org/abs/2111.00775

链接指路:

https://github.com/PaddlePaddle/PaddleClas

(Star🌟收藏一下,不易走丢哦)

话不多说,让我们直接来看看这个图像识别系统的架构:

2242b65957f779ba17316687e5c7d97c.png

图1 PP-ShiTu架构示意图

01.轻量的主体检测

PP-ShiTu的第一个模块是主体检测,它的作用是在图像中找出主体目标的区域。PP-ShiTu在这个模块中采用了超高性价比的目标检测算法——PP-PicoDet。PP-PicoDet在骁龙865上,单张图像21ms的预测速度下,在COCO数据集mAP可以达到36.3%;相同环境下,精度优于YOLOv5n和YOLOX-nano 8个点以上。而它的出现,使PP-ShiTu的主体检测模块,相比上一个版本在精度几乎不变的情况下,预测速度提升了15倍以上!

e310f75ceb7f941b559f3c311ef1cac1.png

图2 主体检测新旧版本指标对比图

PP-PicoDet技术报告地址:

https://arxiv.org/abs/2111.00902

02.高效的特征提取模块

PP-ShiTu的第二个模块是特征向量提取。它的作用是将图像转换成特征向量,方便后续进行检索识别。PP-ShiTu采用CPU级轻量化骨干网络PP-LCNet,并结合arcmargin算法,得到轻量化的特征提取模型。在 Intel至强6148处理器,PP-LCNet的单张图像5.39ms的预测速度下,在ImageNet上Top1识别准确率可以达到80.82%,准确率超越大模型ResNet50的模型效果,而预测速度却可以达到后者的3倍!PP-ShiTu充分挖掘该网络的潜力,学习一个具有超强泛化能力的特征提取模型,同一模型可在多个数据集上同时达到较高精度。

08e4e0f01b659a1fc084dcf3be3a5d2b.png

图3 特征提取模型新旧版本指标对比图

PP-LCNet技术报告地址:

https://arxiv.org/abs/2109.15099

ArcMargin文章地址:

https://arxiv.org/abs/1801.07698

03.向量检索模块

PP-ShiTu的第三个模块是向量检索。当获得了图像特征后,我们通过计算向量距离来获得两张图像的相似度,进一步通过向量检索获取最终识别结果。这种方式最大的优点是,当增加新的品类时,不需要重新训练提取特征模型,仅需要更新检索库即可识别新的目标。为了更好地兼容(Linux, Windows, MacOS)多平台,PP-ShiTu使用的向量搜索模块Faiss。

Faiss技术报告地址:

https://arxiv.org/pdf/1702.08734.pdf

而这样一个高效的识别系统使用起来却只需三步,绝对的 ”开箱即用”!

  • 第一步通过目标检测模型,进行主体检测;

  • 第二步对每个候选区域进行特征提取;

  • 第三步将特征提取后的向量在检索库中进行检索,完成匹配,返回识别结果。

f07f2a1ea30ed3fe159b961eac6cba3f.png

图4 PP-ShiTu使用流程示例

直播预告

为了让开发者更深入的了解PaddleClas并手把手教大家完成图像识别系统的搭建,项目团队还精心准备了为期4天的直播课程。11月2日-5日百度高工将为我们讲解图像识别产业应用的方法和技巧,对各类痛难点解决方案进行详细拆解分析,现场还可以直接为大家进行答疑,还在等什么!赶紧扫码上车吧!

扫码报名直播课,加入技术交流群

2ddbcf9cbbb75664cc1be91bdf43d346.png

精彩内容抢先看!长按收藏海报~

e1969e4bf81653ff7664d5b86f26215c.png

7fb99a04d23af316559487a198c72490.png

如果您想详细了解更多飞桨的相关内容,请参阅以下文档。

官网地址:

https://www.paddlepaddle.org.cn

【PaddleClas】项目地址:

GitHub: https://github.com/PaddlePaddle/PaddleClas/tree/release/2.3

Gitee: https://gitee.com/paddlepaddle/PaddleClas

这么强大、用心的项目 ,还不赶紧给各位开发者一个Star🌟的鼓励!

https://github.com/PaddlePaddle/PaddleClas

ea1ad1904715628579096bcc0598da2b.png

数据来源:部分图片来源于网络,侵权可删

python基于paddleclas的pp-shitu技术实现的图片分类识别系统源码.zip 立即下载

相关推荐

Boost电路双闭环控制MATLAB仿真

通过电流内环控制,我们可以改变目标平均电流基准值的大小来闭环改变占空比,再改变输出电压与电路电流,直到电路电流达到基准电流才达到稳态。但是我们的基准电流依旧是外部提供的,下边的电压外环控制就是电路自己计算基准电流。

Fourglsl的博客 5846

快速实践大规模轻量级图片分类模型:飞桨识图 PP-ShiTu

飞桨识图 PP-ShiTu是大规模轻量级图片分类模型,重建索引速度快,识别速度快,上手快!展示了官方的饮料数据集和斯坦福在线商品数据集上的效果。

m0_63642362的博客 4917

PSI5协议技术文档与驱动开发指南

• 供电与数据复用:ECU通过双绞线为传感器提供稳压(典型值5V-11V),同时检测线路电流变化实现数据传输。• 同步信号:ECU发送3.5V电压脉冲(上升沿触发传感器响应),用于时序同步。• 安全气囊:PSI5-P模式实现多碰撞传感器同步采样(响应时间<10ms)• CRC-3(3位):ASIL-B以上功能安全要求(如动力总成传感器)• 奇偶校验(1位):适用于低安全等级场景(如PSI5-P10P模式)• 典型应用:PSI5-P(并行总线)、PSI5-U(通用总线)

u012733413的博客 2867

基于PP-ShiTu的商品识别系统

转自AI Studio,原文链接:基于PP-ShiTu的商品识别系统 - 飞桨AI Studio 基于PP-ShiTu图像识别系统的商品识别 背景介绍 1、项目效果 视频地址 2、发展概况 随着无人超市、新零售等商业模式的发展,越来越多的品牌商及商超零售企业开始引进人工智能技术,探索商品管理、成本控制、用户体验等多维度的数字化转型,转型中所涉及的货架陈列分析、智能结算、智能库存管理、智能货柜、电商平台等以图搜图的场景背后的核心技术都离不开商品识别算法。 3、痛点问题 结算效率要求极高:在

m0_63642362的博客 4228

SAP ABAP干货:用REUSE_ALV_GRID_DISPLAY_LVC实现ALV多屏幕独立布局(含handle参数详解)

本文详细解析了SAP ABAP中如何使用REUSE_ALV_GRID_DISPLAY_LVC函数实现ALV多屏幕独立布局,重点介绍了handle参数的技术原理和实际应用。通过变式标识符和LTDX表存储机制,开发者可以确保不同ALV报表屏幕的布局设置互不干扰,提升复杂报表场景下的用户体验。

weixin_29268267的博客 310

RAGFlow 离线部署:解决cl100k_base.tiktoken问题

摘要 本文详细解决了RAGFlow离线部署时tiktoken缓存文件下载失败的问题。通过分析tiktoken库的缓存机制,一次性不改代码解决.

baidu_25691461的博客 830

PP-ShiTu: A Practical Lightweight Image Recognition System

最近看了一个新的分享,关于图像识别的,对于大规模图像搜索以及新物品频繁情况下表现良好。 论文: https://arxiv.org/abs/2111.00775 项目: https://github.com/PaddlePaddle/PaddleClas Abstract 近年来,图像识别的应用发展迅速。在人脸识别、行人和车辆再识别、地标检索和产品识别等不同的领域,已经出现了大量的研究和技术。在本文中,提出了一种实用的轻量级图像识别系统PP-ShiTu,由以下3个模块、主体检测、特征提取和向量搜索等模块

uncle_ll的博客 6785

AI自动打游戏全攻略:从环境搭建到Agent训练实战

本文系统介绍了AI自动打游戏的技术实现方案,重点解析了强化学习(DQN算法)在贪吃蛇游戏中的应用。文章从技术选型入手,对比了强化学习与计算机视觉两种方案,详细说明了开发环境配置步骤,并深入讲解了DQN模型构建、游戏环境封装、训练优化等核心环节。通过经验回放和目标网络等技术,有效提升了AI的学习效率和稳定性。该方案具有通用性,只需调整参数即可应用于其他简单游戏场景,为开发者实现游戏AI提供了完整的技术路径。

milk416666的博客 4131

Umi-OCR:免费开源的Ai文字识别神器,轻松搞定图片与PDF 文本提取及二维码解析

各位小伙伴们,大家好呀!欢迎关注天夏Ai,全网同名,我们致力于为大家挖掘和分享各种精品实用的人工智能(Ai)资源,包括但不限于:Ai黑科技工具软件、Ai副业创业项目、Ai智能硬件设备!这些软件拥有强大的功能和创新的算法,无论是提升工作效率,还是满足个人兴趣爱好,都能为你提供独特的解决方案,让你在使用过程中感受到科技的魅力与力量。如果你正在寻找新的发展机会,我们的Ai副业创业项目或许能为你打开一扇新的大门。

专注于分享人工智能精品资源:Ai副业项目、Ai效率神器! 3151

蓝牙配对鉴权过程深度剖析:Just Works/Numeric Comparison/Passkey Entry/OOB 协议流程

当你新买的智能手表与手机配对时,是否遇到过这样的情况:有时只需在手机上点击 "确认" 即可完成配对,有时却需要在手表上输入手机显示的 6 位数字,而连接车载蓝牙时可能又需要输入固定密码?这些差异背后,是蓝牙配对鉴权机制在默默工作。蓝牙配对鉴权是设备间建立安全连接的核心环节,直接关系到数据传输的保密性和设备身份的真实性。​

byte轻骑兵的技术小窝 3573

SAP S/4HANA Cloud 管理员业务角色创建实战:基于 SAP_BR_ADMINISTRATOR 模板的一站式指南

摘要:SAP S/4HANA Cloud新系统初始登录时常见Fiori Launchpad无磁贴的问题,这是由于缺乏合适的业务角色分配。本文介绍了通过预交付的SAP_BR_ADMINISTRATOR模板创建管理员角色的完整流程,包括业务用户、业务角色和业务目录的核心概念解析。重点说明了直接使用模板的风险,并提供了从模板创建自定义管理员角色的详细步骤(4.1-4.3),以及权限限制设置的注意事项。文中还分享了一个实际项目案例,强调正确配置管理员角色对后续权限体系建设的关键作用。(149字)

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 204

发掘OCR新境界:基于C的图片文字识别神器

发掘OCR新境界:基于C#的图片文字识别神器 去发现同类优质开源项目:https://gitcode.com/ 在数字时代,快速而准确地提取图像中的文字信息成为了一个关键的需求点。今天,我们要向大家隆重介绍一个宝藏级的开源项目——C# 图片文字识别 OCR。它巧妙结合了百度PaddleOCR的先进技术,让本地图片与屏幕截图的文字提取变得轻而易举,尤其适配于隐私敏感和高效办公场景。让我们深入了解这一...

gitblog_09726的博客 933

04 HCM CPI SF集成-员工集成(一)

将员工主数据和组织数据从SAP Successfactors Employee CentraI复制到SAPERP或SAP S/4HANA,SAP SF CPI HCM集成

SAP CPI 146

3分钟掌握Image-Downloader:一键批量下载Google/Bing/Baidu图片

在数字时代,图片素材收集是每个创作者、设计师和研究者的日常需求。Image-Downloader作为一款开源免费的图片批量下载工具,能够让你从Google、Bing、Baidu三大搜索引擎快速获取高质量图片资源,彻底告别手动保存的繁琐过程。 ## 🚀 为什么你需要这款图片批量下载神器? ### 跨平台搜索,全球资源一网打尽 🌍 Image-Downloader最大的优势在于同时支持三大主流

gitblog_00272的博客 1099

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

efm32 入门.pdf

本PDF共计22页,介绍的是操作驱动API,下载与否自己斟酌。

告别手动保存!这款Python图片批量下载神器让你效率翻倍

还在为了一张张手动保存网络图片而抓狂吗?🤔 每天花费大量时间在右键另存为的操作上,不仅效率低下,还容易遗漏重要内容。今天我要向你推荐一款真正能够解放双手的图片批量下载工具——Image-Downloader,它将彻底改变你的工作方式! ## 🎯 为什么你需要这款图片采集助手? **传统下载的三大痛点**: 1. **时间成本高**:手动保存100张图片可能需要30分钟以上 2. **容易出

gitblog_01081的博客 848

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

如何用pan-baidu-download轻松突破百度网盘限速:完整教程与实用技巧

还在为百度网盘的龟速下载而烦恼吗?非会员用户常常面临下载速度仅有100-300KB/s的困境,而会员用户却能享受10-20MB/s的高速下载体验。今天,我要向大家介绍一款开源神器——**pan-baidu-download**,这是一个基于Python开发的命令行工具,能够帮助你突破百度网盘的下载限制,实现高速下载! ## 为什么你需要这个百度网盘下载工具?⚡ 在众多百度网盘下载工具中,pan

gitblog_00211的博客 260

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

曾经神器又回来了?最新开源修复版,一键轻松OCR图片提取文字,支持翻译,完全免费 天若OCRV6.0

天若OCR开源修复版是一款实用的文字识别工具,支持一键提取图片文字和翻译功能。软件绿色免安装,操作简单,默认快捷键F4识别、F9翻译。内置百度/腾讯OCR接口(每月免费额度),需简单配置API即可使用。识别准确率高,中英文互译流畅,适合办公场景。下载解压后运行exe,在状态栏右键设置即可使用。下载链接:https://pan.quark.cn/s/e4b192bde647

zjz858566602的博客 689

ScreenTranslator终极教程:免费开源跨语言翻译神器轻松搞定外语难题

还在为看不懂外文网页、游戏对话、技术文档而烦恼吗?ScreenTranslator这款开源免费的屏幕翻译工具能够完美解决你的语言障碍问题。无论你是学生、上班族还是游戏玩家,这款集成了智能截图、OCR文字识别和多引擎翻译三大核心功能的神器,都能让你轻松应对各种跨语言场景,真正实现外语学习零门槛。 ## 🎯 真实场景应用:让翻译无处不在 ### 外语学习者的得力助手 每天阅读外文资料时遇到生词或

gitblog_01069的博客 1136

终极免费图片批量下载神器 - 一键获取全网高清图片

在当今数字时代,寻找高质量图片素材已成为设计师、内容创作者和普通用户的日常需求。Image-Downloader作为一款专业的**图片批量下载工具**,凭借其**多搜索引擎支持**和**高效下载**能力,彻底改变了传统图片获取方式,让每个人都能轻松拥有海量图片资源。 ## 🚀 快速上手:零基础也能轻松操作 想要开始使用这款强大的**图片批量下载工具**吗?整个过程简单到超乎想象: ###

gitblog_01031的博客 738

5分钟搞定!AC-baidu脚本终极指南:让你的搜索体验飞起来 [特殊字符]

还在为搜索结果中的广告烦恼吗?每次搜索都要等待页面跳转,浪费宝贵时间?今天我要给你介绍一款能彻底改变你搜索习惯的神器——**AC-baidu脚本**。这是一款完全免费的浏览器脚本,专门为优化百度、谷歌、搜狗等主流搜索引擎而生,让你享受纯净、高效、个性化的搜索体验。 想象一下:搜索结果页面干净清爽,没有任何烦人的广告;点击链接直接跳转到目标网站,不再经过繁琐的重定向;搜索结果以美观的双列布局展示,

gitblog_01067的博客 1067

全球首个开源图像识别系统上线!

Datawhale开源方向:图像识别,贡献者:百度团队图像识别已经深深融入我们生活的方方面面,小到人脸解锁、支付、打卡、酒店入住,摄像头中的违规驾驶识别,网购明星同款时的以图搜图,大到...

Datawhale 772

【短视频创作】Tailor:免费开源AI视频神器,让创作更高效!

Tailor 绝非传统意义上的普通视频编辑工具,它是一个**集人工智能技术之大成的创新平台**,为视频创作领域注入了新的活力。以下是 Tailor 令人瞩目的一些核心特性,正是这些特性使其在众多视频编辑软件中脱颖而出,成为视频创作者的得力助手。

寻道AI,探索AI无限可能! 4913

开源免费,离线畅用的 OCR 神器!

Umi-OCR 是一款功能强大且灵活易用的离线 OCR 软件,能够满足各种场景下的文字识别需求。无论你是学生、上班族,还是需要处理大量图片文字的专业人士,Umi-OCR 都能为你提供高效、精准的解决方案。它的最大优势在于开源免费、批量处理、离线运行、多语言支持以及精准高效。现如今市面上的 OCR 产品参差不齐,不少都存在操作门槛高、上手困难的问题,或是识别效果欠佳,识别出的文字错漏百出,实用性大打折扣!在软件左侧,你可以选择所需的功能页面,无论是截图识别、批量处理,还是其他功能,都能轻松找到并使用。

fengyuruanjian的博客 897

外卖数据抓取神器(Waimai Crawler):轻松自动化美团饿了么订单管理 [特殊字符]

外卖数据抓取是餐饮企业提升运营效率的关键环节。今天我要向大家推荐一款强大的开源工具——外卖数据抓取神器(Waimai Crawler),它能够帮助您自动化抓取美团、饿了么和百度外卖三大平台的订单数据,彻底告别手动整理的烦恼! ## ✨ 为什么选择这款外卖订单自动化工具? 作为专为餐饮企业多门店场景设计的解决方案,这款工具具有以下核心优势: - **全平台支持**:同时覆盖美团、饿了么、百度外

gitblog_00578的博客 916

全球首个开源图像识别系统上线了!

父老们,乡亲们!当今最热门前沿的技术是什么?没错儿,那必须是人工智能AI!而你随处可见的自动驾驶、刷脸支付、门禁识别、无人零售、还有方便我们疯狂剁手的拍照购物等应用,其中一个关键技术就是图...

AI公园 473

全球首个开源图像识别系统上线了!人脸、商品、车辆识别一网打尽!

父老们,乡亲们!你知道人脸、商品、车辆识别,以图搜图乃至自动驾驶,背后的技术是什么嘛? 起初小编觉得不就是图像分类、目标检测这些东西嘛,有什么难的?但能熟练这些应用的BAT高级工程师们都轻松年薪百万,笑傲人生了!!! 当小编正在酸成柠檬精的时候,BAT大神幽幽的说:这背后是综合使用目标检测、图像分类、度量学习、图像检索的【通用图像识别系统】… 度量学习是啥?图像检索是啥?通用图像识别系统又是啥?!看来还是我Too Simple,Too Naive了… 难道我真的就无缘年薪百万了嘛?!正在小编捶胸

百度大脑 659
上一篇: 与其抖音,不如拼了!10周拿下腾讯数据分析岗!
下一篇: 常用正则表达式速查手册,建议收藏!
菜鸟学Python
博客等级 码龄9年 8062粉丝 571原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值