无人机+ AI 图像分析:里斯本大学高效检测林业害虫

无人机+AI人工智能可以实现哪些领域的场景应用? 将一些简单常见的智能分析任务放在前端进行处理,而较为复杂的智能分析任务则放在后端进行处理,这样可以实现资源和算力的灵活调配、降低数据传输中产生的延时、带宽消耗等等问题。 阅读详情

内容一览:早期发现虫害对于因地制宜采取防控措施至关重要。尽管遥感技术可用于快速扫描大面积区域,但面对低强度信号或难以检测的物体,其效果并不尽如人意。因此,里斯本大学研究人员将无人机与 AI 图像分析相结合,在此基础上测试了两种深度学习方法—— FRCNN 及 YOLO 来检测早期松异舟蛾巢穴,并且效果显著。

关键词:AI  算法   害虫检测   YOLO

本文首发自 HyperAI 超神经微信公众平台~

当下,森林资源减少和环境恶化愈加严重,森林害虫已然成为全球森林保护的重要挑战之一。其中,松异舟蛾 (Thaumetopoea pityocampa) 这类具有破坏力的害虫引起了广泛重视。松异舟蛾主要分布在欧洲南部、地中海和北非地区,其幼虫会在松树的树干和枝条上钻洞啃食,破坏松树的生长和发育。

为了早期检测和防控松异舟蛾,里斯本大学 (University of Lisbon) 研究人员比较了两种深度学习算法,以解决无人机图像中的巢穴识别难题。目前该研究已发布在《NeoBiota》期刊,标题为「Testing early detection of pine processionary moth Thaumetopoea pityocampa nests using UAV-based methods」。

该研究成果已发表在《NeoBiota》上

论文地址:

https://neobiota.pensoft.net/article/95692/

实验概述

过往,科研人员通常借助遥感技术(卫星等)和多光谱相机结合,得到一定区域内的森林覆盖图像,并从树冠颜色、死树位置等信息判断整体虫害情况。然而,由于图像分辨率很低,无法检测到单个树木虫害情况。因此,本实验中研究人员提出了由无人机采集图像的方式。这样,无人机能够接近单个树木并对它们进行更细致的扫描和采集。

研究人员在无人机获取的图像上,测试了两种深度学习方法——Faster R-CNN (FRNN) 及 YOLO 来检测早期松异舟蛾巢穴(以下简称巢穴),具体实验过程如下:

研究选址 

研究人员在法国、意大利和葡萄牙各选择了 1 个研究地点。如图 1 所示,这 3 个地点之间树龄、密度等特征均不相同。

图 1:研究地点情况

a:葡萄牙松树林

b:法国松树林

c:意大利黑松林

在 3 个地点中,研究人员都采用了地面计数 (2 名观察员分别目测树木两侧)  来检测巢穴数量,除此之外,图 1b 所示的法国松树林中,研究人员还站在一个位于树冠上方 2 米的移动平台上,来检测巢穴数量。

数据集 

研究人员使用了无人机加高清摄像头的方式采集了 3 个样地的图像,其中高清 (HD) 摄像机 (RGB HD SONY Alpha 7R) 最佳应用性能方案确定为:采用具有 35mm 焦距和至少 36 Mpix 分辨率的 RGB HD 传感器,而无人机则选择了 DJI Matrice 300 多旋翼无人机平台,并制定了 80% 的航迹内部和横跨航迹的重叠度。

最终,研究人员得到了无人机收集的 22,904 张图像作为数据集,并通过数据增强技术,如改变亮度、色调、噪声及图像压缩等操作无人机图像,生成新的数据集,使模型更好地学习和泛化。其中,该数据集的 80% 用于模型训练,20% 用于测试。

实验过程

无人机模型 

考虑到一些巢穴只能从侧面看到,研究人员用模型检测主要针对的是单张无人机正射图像而非全局正射图像,因为全局图像是垂直视角,容易造成遗漏。无人机正射图像是指通过对无人机采集的图像进行处理,使其在地图上的位置和比例与现实世界中的位置和比例一致。

研究团队训练了基于 FRCNN 和 YOLO 的两种深度学习模型,同时为了评估模型检测无人机图像的结果,还配备 1 名观测员对每张图像上的巢穴数量进行了视觉评估。

研究人员使用了 F1 得分具体衡量模型与人眼检测 (human eye) 在无人机、地面图像上的性能。其中 F1 得分计算公式如下图:

图 2:F1 计算公式

F1 得分是精确率和  召回率 的  调和平均 值,可用来评估模型的准确性和完整性。其取值范围为 0 到 1,越接近 1 表示模型的性能越好。

实验结果 

研究人员将 FRCNN 及 YOLO 模型与人眼检测进行了比较,测试了模型在检测树上有无巢穴存在 (% infested trees) 和巢穴数量 (No. PPM nests) 的性能。

表 1:不同方式检测松异舟蛾巢穴情况

如表 1 所示,通过地面计数,人眼对整个研究范围内树木一共目测到 665 个巢穴;而通过目测无人机图像,则检测到 222 个巢穴。研究人员认为造成二者差异的原因是地面目测具有多维观测角度,而无人机局限于从上方进行拍摄。不过,无人机图像具有其自身优势,因为地面详细检测需要耗费较高成本,而无人机可以告知人们存在的风险并进一步采取行动进行详细的地面检测。

下图是两种模型在 3 个样地无人机图像上的巢穴存在检测和每棵树上巢穴数量检测的 F1 得分。

图 3:两种模型对无人机图像检测 F1 得分

a:检测无人机图像上的巢穴存在

b:检测每棵树上巢穴数量

如图 3 所示,检测无人机图像上的巢穴,YOLO 模型 F1 得分高达 0.826,检测每棵树上巢穴数量,YOLO 模型 F1 得分高达 0.696。同时,研究人员发现 YOLO 模型的检测性能高于 FRCNN。下图是在不同研究地点(不同松树品种),两种模型在检测无人机图像时的 F1 得分。

图 4:不同研究地点,两种模型 F1 得分

a: 检测无人机图像上的巢穴存在

b: 检测每棵树上巢穴数量

如图 4 所示,在 3 个样地,无论是检测巢穴存在还是检测每棵树上巢穴的数量,YOLO 模型 F1 得分均优于 FRCNN 模型。

综上,研究人员提出,无人机和 AI 模型相结合能够有效地对松异舟蛾巢穴进行早期检测。其中,无人机有如下优点:

  • 高效性:无人机可以快速地覆盖大面积的地区,收集大量的数据。
  • 高精度:无人机搭载的高分辨率相机可以捕捉到非常精细的图像和视频,从而使无人机可以提供高精度的数据。

针对无人机图像上的巢穴检测及巢穴数量检测,YOLO 模型都表现优异。这表明相关技术的结合,在监测和管理森林中的害虫和病害方面具有重要意义,同时也为保护森林生态系统提供了新的思路。

无人机+ AI:科技领域的重要趋势

目前看来,无人机+ AI 已成为国内外森林保护发展的共识。通过无人机的高空视角和  人工智能 的分析,研究人员执行任务时能够更高效、准确和自动化,从而改善森林保护效率。

聚焦国内,中国科学院发布的「森林病虫害遥感监测——从卫星到无人机」报告中详细介绍了森林病虫害的类型、发展阶段以及检测方法,并提出未来森林保护工作的重要方向之一正是发展预测模型,实现预测和检测方法的无缝对接,这与本论文的研究成果不谋而合。

报告地址:

https://bit.ly/3oJgDWf

可以看到,无人机+ AI 为森林保护工作带来了新的机遇和挑战,为提升效率和保护森林资源发挥了重要作用。然而,无人机与人工智能的融合同时也面临一系列挑战。一方面,需要不断推动无人机和人工智能的发展,提高性能和稳定性。另一方面,在数据安全和隐私保护方面,需要相关政策和规范,以确保无人机和人工智能应用能安全地处理和存储数据。

本文首发自 HyperAI 超神经微信公众平台~

无人机图像识别与分析 无人机图像识别与分析是无人机技术应用的一个重要方向,涉及到计算机视觉、机器学习和模式识别等多个技术领域。 阅读详情

相关推荐

无人机图像处理工具——增强、去雾、调节亮度、自动优化、信息提取

图像处理工具主要包含图像调整、自动调整、图像去雾、GPS提取、正射影像增强等图像处理算法和工具,主要用于无人机影像增强、去雾等。当前版本为3.0。 一、处理单张图像 1.点击上方打开单个图像。 2.选择图像目录并选中图像点“打开”,之后等待软件加载图像。 3.完成图像加载后,主界面会显示一张按比例缩放后的预览图。 4、选择图像处理方式,处理方式包括:自动对比度、自动亮度、去雾。 自动对比度 自动亮度 去雾 二、批量处理影像 点击“批量”,选中影像存

jameschen9051的博客 6379

无人机图像识别技术研究及应用,无人机AI算法技术理论,无人机飞行控制识别算法详解

首先,我们需要对无人机摄像头进行设置,以获得最佳的图像质量和角度。无人机图像识别需要大量的标注数据集进行训练,但是由于无人机拍摄场景的多样性和复杂性,标注数据集往往不够丰富,这给模型的训练和优化带来了一定的困难。无人机可以在复杂的环境下进行救援和搜救行动,通过图像识别技术对灾害现场进行实时监控和分析,可以快速找到受困人员和定位灾害地点,为救援行动提供重要的帮助。无人机搭载高分辨率相机和传感器,可以对文化古迹进行数字化保护和修复,通过图像识别技术对古迹进行精细化的识别和分析,可以更好地保护和传承文化遗产。

专注多旋翼、复合翼无人机技术研究,从事低空经济行业。 5984

(三)无人机数据处理算法介绍——目标识别一

介绍了目标识别中基于阈值的分割和基于分类器的识别,之后我们将介绍基于深度学习的目标识别

u011326478的专栏 2万+

限制航空和无人机图像用于定量遥感的分析

限制航空和无人机图像用于定量遥感的分析

晚来天欲雪,能饮一杯无? 638

半个小时内,用神经网络识别无人机航拍图像

上一篇只要九分钟,用神经网络构建人脸比对模型的文章发出去之后,承蒙大家厚爱,得到了不少反馈。不少朋友希望能让我讲讲如何做图像识别。正好 TeguCV 的安装包里有一个测试数据集是我们用无人机航拍的车辆照片,就用它来做个教程吧! 前情提要: MasterPa:只要九分钟,用神经网络构建人脸比对模型 首先,你需要能够使用神经网络进行深度学习,如果你还不会的话,你有两个选择: 从头学起,比如从吴恩达的...

weixin_43444740的博客 8760

(二)无人机数据处理算法介绍——图像拼接

介绍了无人机图像拼接一些流程和常用方法,可以通过运动估计来实现图像的拼接

u011326478的专栏 2万+

无人机生态环境监测、图像处理与GIS数据分析

融合无人机生态环境监测技术和ArcGIS数据分析技术,通过具体案例分析与软件操作实践,详细介绍包括无人机多源遥感影像数据采集(可见光、多光谱、激光雷达等)、影像数据拼接、空间数据编辑、空间数据分析、空间数据专题制图等流程的一条完整作业“流水线”。.........

WangYan2022的博客 2114

无人机安全管理体系(SMS)实战指南:四大支柱、5×5 风险评估与法规合规落地全解析

安全管理体系(SMS,Safety Management System)是一套以风险为核心、可持续运行的管理机制,不是一堆制度文件。支柱一句话产出物① 安全政策与目标老板签字承诺,定方向安全政策书、安全目标、组织与职责② 风险管理提前找出危险源并压住它危险源台账、风险评估表、控制措施③ 安全保证用数据证明「真的安全」安全绩效指标、监控报告、变更管理记录④ 安全促进让所有人愿意报问题培训记录、安全文化、自愿报四大支柱不是四个并列的模块,而是一个首尾相接的闭环:fill:#333。

Frank17806的博客 393

【无人机】【2015.01】无人机图像的检测与分析方法

本文为意大利特伦托大学(作者:Thomas Moranduzzo)的博士论文,共108页。 无人机(UAV),通常被称为无人驾驶飞机,是在遥感领域获得广泛应用的空中平台。无人机起源于军事技术,但在最近几年,已经逐渐用于民用任务的设备平台。这种采集系统的主要优点在于其使用简单。确实,无需太多的费用就可以使用无人机。由于无人机可以飞得非常接近被调查的物体,因此它们能够获取极高分辨率(EHR)图像,可...

weixin_42825609的博客 897

33、智能农业中的无人机图像分析

本文详细介绍了无人机图像和深度学习技术在智能农业中的应用,特别是作物与杂草分布的精确估算方法。通过多光谱图像采集、基于UNet架构的图像分割、边缘计算平台的应用,实现了高效、精准的农田管理。文章还展示了相关实验结果和技术优化措施,并探讨了未来发展方向。

ll5678的博客 138

【MATLAB代码,无人机避障7】基于RRT*与人工势场法(RRT*+APF)的多无人机二维动态路径规划与避障。订阅专栏后可查看完整代码

本文基于RRT与人工势场法(APF)实现四架无人机在二维动态障碍环境中的协同路径规划与避障。通过RRT优化全局路径,结合APF进行局部避碰,支持参数自定义,提供完整MATLAB代码,可直接运行并生成轨迹、安全净间隙、速度加速度及航程等可视化结果,对比RRT+APF与RRT*+APF性能,适用于科研与教学。

985工科博士毕业,专攻定位、导航和滤波等算法研究。从业10年,主要使用MATLAB 242

LeCun团队世界模型JEPA首登无人机:9K参数模型,零样本Sim-to-Real飞入100Hz闭环

SkyJEPA提出一种极小参数(9K)的潜空间动力学模型,通过JEPA架构在抽象表征中预测未来,避免自回归递归误差累积。结合物理探针解码与MPPI控制,实现零样本实机飞行,在60步预测中位置误差仅1.43m(基线8.80m),姿态误差4.71°(基线53.4°)。关键创新在于:潜空间提升时间直线化以抑制误差增长;物理骨架确保状态传播几何正确;数据管线通过域随机化覆盖真实分布;MPPI对模型误差具有天然鲁棒性。实验验证其在变载、换桨等未见场景下仍保持稳定性能,证明“预测-解码-控制”接口设计优于单一模块优化。

编程爱好者 288

DPO(Direct Preference Optimization)实战全流程指南

《DPO实战全流程指南》摘要 本文提供了端到端的DPO(直接偏好优化)实战方案,包含数据准备、模型训练、评估部署全流程。核心内容包括: 数据构建:推荐UltraFeedback等高质量数据集,提供数据预处理代码 训练配置:基于HuggingFace TRL库的DPO实现,详解beta值等关键参数调优 工业优化:显存节省技巧(LoRA、梯度检查点)、领域自适应方法和在线学习架构 效果评估:量化对比显示DPO可降低86%有害回复率,提升24%用户满意度 常见问题:针对灾难性遗忘、过度安全化等问题给出解决方案 附

技术引领业务创新 1468

无人机如何监测黑臭水体:从指数筛查到边缘推理的递进式技术链路

黑臭水体监测的真实挑战,在于如何从水体光谱信号中稳定反演出COD、溶解氧、氨氮等非光学活性参数,并将反演数据直接转化为可派单的治理事件。受限于空间与光谱分辨率,卫星遥感独立完成参数反演的精度不足;单一可见光只能捕捉表象,无法量化水质等级。工程上的可行路径是一条递进链路:利用指数模型锁定疑似水段,依靠高分辨率多光谱数据建立机器学习反演模型,将模型压缩至边缘端实现实时推理,最后通过低空中枢系统接入工单流转。本文按此链路拆解各环节的技术取舍与物理边界。

THJS优快云的博客 403

Linux -- Tomcat 8.5.55 版本的下载与升级

安全扫描出现如下漏洞: Apache Tomcat 7.0.100之前的7.*版本、8.5.51之前的8.*版本和9.0.31之前的9.*版本中的Tomcat AJP协议存在文件包含漏洞。攻击者可利用该漏洞读取或包含Tomcat上所有 webapp目录下的任意文件,如:webapp 配置文件或源代码等 Apache Tomcat 9.0.0.M1版本至9.0.29版本、8.5.0版本至8.5.49版本和7.0.0版本至7.0.98版本中存在授权问题漏洞。该漏洞源于网络系统或产品中缺少身份验证措施或身份验

支棱起来 4458

STM32CubeMX+Keil5实战:手把手教你用STM32F103C8T6开发扫地机器人(附完整代码)

本文详细介绍了如何使用STM32F103C8T6开发智能扫地机器人,从STM32CubeMX配置到Keil5代码实现的全过程。涵盖硬件选型、时钟树配置、GPIO外设设置、电机驱动、超声波测距及自动避障算法等核心内容,并提供完整代码示例,助力开发者快速掌握智能硬件开发技巧。

weixin_30329623的博客 81

无人机数据链抗干扰怎么做?基于Python的链路健康度监控与分级告警实现

无人机数据链的稳定性,不应该只用信号强度来衡量。第一,能够监测。实时掌握链路质量,及时发现信号衰减和通信异常。第二,能够响应。根据异常等级,执行经过验证的飞行安全预案。第三,能够追溯。将链路状态、飞行轨迹和任务画面关联存档,为后续分析提供依据。对于城市巡检、智慧林业、应急救援等低空应用场景而言,通信链路不仅关系到无人机能否持续飞行,也关系到现场信息能否稳定回传、任务能否顺利完成。

荆棘鸟智能的博客 282

开发simulink 以及stm32半物理仿真碰到的问题,以及处理方法,Error:External Mode Open Protocol Connect command failed(实测有用)

串口实现的,但是在测试的时候发现,这个串口可以正常发送和接收数据,但是一旦把这个串口只让其进行版物理仿真就报错。直接刷写程序是可以的,最后查到问题了。我要实现半物理仿真,就是通过matlab实现可以直接控制stm32板子,实际上是通过xcp on。然后点击simulink上的观测按钮就可以直接和stm32平台进行通讯了。3,还是使用串口3,但是重新需要设置一下com口,因为重新插拔了一下,按照这个设置方法就可以。2,重新加载ioc文件。

pvmsmfchcs的博客 1502

【无标题】无人机视角道路坑洞坑洼目标检测数据集深度学习 目标检测 无人机航拍 道路坑洞 路面病害 YOLO格式 数据集发布9032期

(一)类别构成该数据集聚焦单一类别——坑洞(类别 ID 为 0),任务指向明确,围绕无人机俯视视角下的道路坑洞目标开展检测标注。类别体系精简,与公路路面病害巡检的实际需求高度契合,图像中的坑洞样本可直接作为路面破损识别的核心正样本,便于对接道路养护排查流程。(二)数据数量数据集规模为 3285 张无人机俯视航拍图像,采用标准 YOLO txt 标注格式,标注框总计 4457 个,其中带有效标注的图片 2007 张,全部图片均带有有效标注。

qq_2529413168的博客 181

Docker Compose 中如何控制启动顺序和关闭顺序

文章目录Docker Compose 中如何控制启动顺序和关闭顺序1、基础的启动顺序控制2、关于启动就绪和启动顺序的问题3、重试机制和重连4、使用包装器脚本5、自己定义包装器脚本 Docker Compose 中如何控制启动顺序和关闭顺序 1、基础的启动顺序控制 你可以使用 depends_on 选项来控制服务器的启动和关闭顺序 depends_on,links,volumes_from,和ne...

简简单单Onlinezuozuo 3125

Cloud Connector RFC 访问控制深度实践:为 SAP BTP ABAP environment 打通安全、可控的远程连接

本文是一份面向企业ABAP团队与平台工程团队的Cloud Connector RFC访问控制配置指南。文章详细介绍了虚拟主机/实例号、负载均衡、资源白名单等核心概念,并提供了从零开始的配置流程。主要内容包括:通过Cloud Connector建立安全隧道的价值(零暴露、最小权限)、两种连接类型(无负载均衡/带负载均衡)的配置方法、资源白名单设置技巧,以及两个典型应用场景(Custom Code Migration远程检查与BAPI调用)的实操案例。指南基于SAP官方文档,包含落地经验与避坑建议,可帮助团队快

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 147

32阵元CRPA天线:俄罗斯无人机卫导抗干扰能力正在如何升级-V2?

俄罗斯Shahed/Geran类无人机或已装备32阵元CRPA抗干扰天线,实为L1、L2各16阵元的双频结构,非单频32通道。该设计提升双频空间抑制能力,每频段可形成最多15个零陷,增强对多源压制干扰的应对。但性能受限于独立通道数、阵列校准精度、射频前端动态范围及真实战场多干扰环境。阵元数≠抗干扰力,关键在系统工程实现与实战适应性。

chen2jiang3的博客 237

uni-app - 将 base64 图片编码转为 Blob 本地文件路径(把base64类型的图片,转换成blob二进制文件流)适用于 uni-app / vue.js / JavaScript

uni-app/vue.js/JavaScript将base64转Blob,uniappapp端如何将图片的base64编码转换成File对象或Blob,uni-app/vue.js/JavaScript中拿到base64转blob对象,uniapp图片base64格式转blob格式方法,uniapp上传图片压缩转base64码与base64转图片路径,Base64/Blob/File图片文件转换,url、base64、blob相互转换方法,读取本地文件为Base64并转成B

🏆 前端领域优质创作者 1万+
上一篇: 编译 ONNX 模型
下一篇: 编译 Keras 模型
HyperAI超神经
博客等级 码龄7年 8873粉丝 1753原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值