机器视觉学习 10 4

机器视觉学习笔记(1)——OpenCV配置 机器视觉学习笔记(1)——OpenCV配置标签: 机器视觉1.什么是OpenCV OpenCV的全称是:Open Source Computer Vision Library。OpenCV是一个基于(开源)发行的跨平台计算机视觉库,可以运行在Linux、Windows和Mac OS操作系统上。 简单地说,OpenCV就是一个第三方关于视觉处理的开源库,使用该库可以采集摄像头拍摄的视频,可以处理图 阅读详情

主动式双目立体视觉

基于主动式双目立体视觉的轨道扣件状态智能检测技术弹条中肢离缝测量的具体实现方法

好的,本文将为您详细解析这篇论文中弹条中肢离缝测量的具体实现方法、步骤和技术细节。其核心技术流程可概括为以下步骤:

一、测量原理概述

中肢离缝是指弹条中肢底部与绝缘块上表面之间的垂直距离。本文方法的精髓在于,它并非重建整个扣件的三维模型,而是以目标驱动,只精确重建激光光条所在的一条线的三维信息,这条线恰好包含了弹条中肢和绝缘块表面的高度数据,从而极大地减少了数据量和计算复杂度。

二、实现步骤与技术细节

1. 数据获取:激光光条投射与图像采集

系统首先由激光器向轨道扣件表面投射一道高均匀性的激光光条。这条光条同时被两个工业相机从不同角度捕获。

​关键点​:激光光条受到物体表面形状的调制而发生变形,这条变形的光斑就编码了物体表面的轮廓和高度信息,是后续一切计算的源头。

2. 核心预处理:光条亚像素中心提取

要精确计算三维坐标,首先必须在二维图像上找到激光光条中心线的精确位置。本文采用了高效的CPU+GPU异构并行计算方案:

​CPU端​:负责读取左右相机图像,进行图像预处理和数据类型转换。

​GPU端​:利用激光光条灰度分布呈类高斯特性的特点,对图像中每个疑似光条的点进行泰勒级数展开,通过数学方法求解出光条中心的亚像素级精确坐标。

​优势​:此方法兼顾了速度和精度,为后续的高精度三维重建打下了坚实基础。

3. 三维信息重建:立体匹配与三角测量

获取左右两幅图像中的光条中心点后,需要建立两点间的对应关系(即立体匹配)。本文利用极线约束来快速、准确地找到左右图中的匹配点对。

匹配成功后,根据双目立体视觉测量模型,通过三角测量法计算出每个匹配点对在三维空间中的坐标 (x,y,z)。其数学模型基于相机的透视投影方程:

​sl​x~l​=Al′​[I∣0]p~​w​sr​x~r​=Ar′​[R∣t]p~​w​​其中,Al′​和 Ar′​是左右相机的内参矩阵,[R∣t]是右相机相对于左相机(世界坐标系)的旋转矩阵和平移向量,p~​w​是空间点 P的世界坐标。

最终,输出的是代表弹条中肢和绝缘块表面轮廓的三维点云。

4. 关键信息提取:点云聚类与几何拟合

获得光条的三维点云后,需要从中提取出用于计算离缝的关键几何信息:

​空间聚类​:首先将三维点云根据空间位置进行聚类,分割为属于弹条中肢的点云簇和属于绝缘块上表面的点云簇。

​几何拟合​:

对弹条中肢的点云簇进行空间圆拟合,得到弹条断面的圆心坐标 c=(x,y,z)和半径 r。

对绝缘块上表面的点云簇进行平面拟合,得到其平面方程 ax+by+cz+D=0及其法向量 v=(a,b,c)。

5. 最终计算:中肢离缝值计算

中肢离缝值 d在几何上就是弹条中肢拟合圆的圆心到绝缘块拟合平面的垂直距离。因此,最终利用点到平面的距离公式进行计算:

d=a2+b2+c2​∣a⋅x0​+b⋅y0​+c⋅z0​+D∣​其中,(x0​,y0​,z0​)是拟合出的弹条圆心坐标。计算结果如图所示,可直观展示离缝情况。

⚙️ 三、性能与优势

实验结果表明,该方法测量精度极高:

​弹条直径测量误差​ ≤ 0.09 mm

​中肢离缝测量误差​ ≤ 0.35 mm

​技术优势​:

​精度高​:通过亚像素中心提取和高精度标定,实现了微米级测量误差。

​效率高​:仅重建一条线而非整个面,避免了海量点云数据处理,算法复杂度大大降低。

​目的性强​:整个技术路线设计紧密围绕“测量离缝”这一最终目标,非常高效和直接。

总而言之,本文通过主动激光编码、双目三维重建、几何拟合这一系列精巧的技术组合,成功解决了传统二维视觉无法检测中肢离缝的行业难题,是一种创新且实用的解决方案。

激光光条受到物体表面形状的调制而发生变形 这句话什么意思 为我举例说明好的,我们来详细解析“激光光条受到物体表面形状的调制而发生变形”这句话的含义。这是一个三维视觉测量中的核心概念。

�� 一、核心概念解读

您可以把这个过程想象成一种​“光学探针”​。

​​“激光光条”​​:就是一束非常直、非常均匀的激光线,它可以被视为一个已知的、不变的基准参考。

​​“物体表面形状”​​:就是被测量的物体(如轨道扣件)表面的高低起伏和轮廓。

​​“调制”与“变形”​​:当这条直的激光线照射到凹凸不平的物体表面上时,从相机的视角看过去,这条激光线就不再是直的了。物体表面的高度信息“调制”了(即改变或编码了)激光线的形状,使其发生了“变形”。

​简单来说,激光光条的“变形”形状,就是物体表面轮廓形状的一种“光学复制”​。通过分析这种变形的图案,我们就可以反推出物体表面的三维形状。

�� 二、举例说明

让我们通过几个生活中的例子来加深理解:

​例子1:用笔在篮球上画直线​

您拿一支笔,想在一个篮球上画一条直线。篮球是圆的,所以您的笔必须随着球面的弧度上下移动。最终,您在篮球上画出的“直线”,从您的视角看是一条曲线。这条“曲线”就包含了篮球是“圆形”的这个三维信息。激光光条就相当于那支笔,它照射到物体上后呈现的曲线,就反映了物体的形状。

​例子2:夜晚的汽车激光大灯​

有些高端汽车的激光大灯会向路面投射一条非常平整、锐利的光带。当汽车行驶在平坦的路面上时,这条光带是笔直的。但当汽车开上一个坡或者压过一个井盖时,您会看到这条光带在坡顶处向上弯曲,在井盖凹陷处向下弯曲。光带的弯曲形状直接反映了路面的起伏情况。

三、在本文中的具体应用与过程

在本文的轨道扣件检测系统中,这个过程被精确化和数学化,具体步骤如下:

​建立基准(标定)​​:首先,将激光器投射到一个已知的、非常平坦的标定板上,相机采集到的图像中的激光线是一条完美的直线。这条直线就是初始的、未调制的基准状态。

​投射与调制​:然后将激光器对准轨道扣件。激光光条会同时照射在弹条(凸起、圆弧状)和绝缘块(相对平坦)上。弹条的中肢是圆柱形的,因此激光线照在上面会呈现出一条规则的圆弧曲线;而照在平坦的绝缘块上,则仍然保持直线。

​捕获变形图像​:双目相机从一定角度拍摄这个场景。在拍摄的图像中,您会看到一条发生了明显变形的激光线​:在弹条位置是曲线,在绝缘块位置是直线。这条变形的光条就是被扣件表面形状“调制”后的结果。

​解码信息(三维重建)​​:系统通过算法(如极线约束和三角测量原理)精确地提取这条变形光条上每一个点的位置。通过对比当前变形后的光条与初始基准光条之间的差异,计算出每个点相对于相机的高度和深度信息,从而重建出扣件表面的三维轮廓。

总结

所以,“激光光条受到物体表面形状的调制而发生变形”这句话的本质是:将难以直接测量的物体表面三维高度信息,转换为了易于分析的二维图像中的曲线形态变化。

这是一种非常巧妙的信息转换方法,是结构光三维测量技术的基石。本文正是利用这一原理,成功地实现了对弹条中肢离缝的高精度、非接触式测量。

机器视觉学习经验 Halcon 软件的介绍与应用 1、主要的视觉软件 •主流软件: 最好的是 Cogrex 的 visionpro:工业化、封装、人性化、评估的便捷性、开发 的快速性 Halcon:开放性强、有试用的 license、提供超过 1000 个算子 Dalsa 的 Sherlock:评估非常快捷,类似于计算器模式,所见即所得 德国的 mil:好处是免费的,性价比不如 visionPro,h... 阅读详情

相关推荐

基于halcon+c#从零开始学习机器视觉——001环境搭建

基于halcon+c#从零开始学习机器视觉——001环境搭建

m0_60548895的博客 5532

高专机器视觉实训教学方案:OpenCV与PyTorch环境配置及项目实战

计算机视觉技术以图像处理和深度学习为核心,通过OpenCV实现图像滤波、边缘检测与轮廓分析,借助PyTorch构建卷积神经网络完成分类识别。其技术价值在于将算法转化为可运行代码,应用于工业检测、文档矫正、颜色分拣等场景。针对高专院校学生基础差异大、课时紧的特点,本方案从环境配置入手,锁定Python 3.8与OpenCV 4.2.0稳定版本,拆解五个递进模块,每个模块对应硬币计数、文档扫描等可交付项目,并融入solvePnP位姿求解与madl多智能体扩展方向,帮助学生快速建立视觉工程实践能力。

weixin_29057065的博客 316

机器视觉HALCON-Windows 10下的HALCON13.0安装

为什么要学习HALCON呢?大概有以下几个原因吧:       首先,这学期学校开设了机器人视觉这门课,选用的是基于HALCON的国外经典教材《Machine Vision Algorithms and Applications》。开学的翻了翻教材觉得挺有意思的,但是书本上的内容只是对这个方面的一个知识概述,没有具体的历程,所以还是有必要搞个软件实际操作一下的。       其次,前面买过OPEN...

NiYintang的博客 1万+

[视觉概述] 机器视觉应用方向、项目流程及学习思路总结

需求分析:一个项目主要包含①定位、识别②缺陷检测③OCR字符识别④测量类的项目这四个大方向 方案设计:根据客户应用的场合不同,选择相应的镜头、相机、支架、光源及如何打光等 概要设计:软件架构体系,vc++联合halcon还是c#联合halcon等,还有算法流程,怎么通讯、怎么识别等 详细设计:每一个功能模块怎么做,包括图像采集模块、处理模块、包括算法模块,如何通讯等。通常将每个模块形成一个动态库...

Loewen丶的小窝 1万+

《HALCON机器视觉与算法原理编程实践》第1章 机器视觉概述-学习笔记

文章目录1.1 什么是机器视觉1.2 机器视觉与计算机视觉的区别1.3 机器视觉的工作原理1.4 机器视觉的应用领域 1.1 什么是机器视觉 机器视觉是一种使用计算机来模拟人类视觉,并使用软件算法对相机采集到的图像进行分析和理解,以进行自动识别和判断的过程。 1.2 机器视觉与计算机视觉的区别 计算机视觉关键是计算机,机器视觉关键是机器,两者侧重领域不同。计算机视觉比较侧重于对图像的分析,回答“是什么”的问题;而机器视觉则更关注图像的处理结果,目的是控制接下来的行为,回答“怎么做”的问题。 计算机视觉一般

超级大洋葱的博客 4680

机器视觉 使用halcon的学习之路

halcon入门

今天也要好好学习 1890

如何系统的进行机器视觉的学习

经典论文:AlexNet(2012)、ResNet(2015)、Transformer(2017)。:掌握基础语法、Numpy(数值计算)、Pandas(数据处理)、Matplotlib(可视化)。传统方法:Harris 角点检测、SIFT/SURF(尺度不变特征)、HOG(方向梯度直方图)。:MAE(Masked Autoencoder)、对比学习(SimCLR)。滤波算法:均值滤波、高斯滤波(去噪)、中值滤波(去除椒盐噪声)。:U-Net(医学图像分割)、Mask R-CNN(实例分割)。

2301_77588508的博客 1948

halcon机器视觉软件_机器视觉软件介绍

机器视觉处理软件:用来完成输入图像数据的处理,通过一定的运算得出结果,这个输出的结果可能是PASS/FAIL信号、坐标位置、字符串等。 常见的机器视觉软件以C/C++图像库,ActiveX控件,图形式编程环境等形式出现,可以是专用功能的(比如仅仅用于LCD检测,BGA检测,模版对准等),也可以是通用目的的(包括定位、测量、条码/字符识别、斑点检测等)。 主流的机器视觉软件有:侧重图...

weixin_34869021的博客 4333

机器视觉学习顺序参考

刚开始接触机器视觉的朋友可以按这个一步步来学习,挺好用的, 一:视觉启蒙入门 1.halcon编程,熟悉halcon环境、tuple数组、文件操作及简单的案例编程 2. halcon基础学习,halcon自定义算子封装等,进行入门编程训练 3. halcon数据类型(主要是控制变量/图像变量)和halcon人机可视化交互 4. halcon视频图像采集,单相机以及多相机 5. 图像处理基础与RO...

perfect-顾(coder)的博客 5055

1.机器视觉入门视频教程笔记

一. HALCON 机器视觉软件HALCON 是由德国 MVtec 公司开发的一套完善且标准的机器视觉算法包(主要用于商业用途)。在欧洲及日本的工业界,HALCON 被公认为性能最佳的机器视觉软件之一。HALCON 支持多种操作系统环境,包括 Windows、Linux 和 macOS。编程接口支持多种编程语言,如 C、C++、.NET(包括 C# 和 VB.NET)、Delphi 等。最新版本为 HALCON 23.05。二. OpenCV 机器视觉软件。

wjh19970930的博客 1273

工业自动化:工业4.0中的机器视觉_10.机器学习与深度学习在机器视觉中的应用

机器学习是人工智能的一个分支,它使计算机能够通过经验(数据)自动改进和适应。机器学习算法可以从大量数据中学习模式和特征,然后用于预测或决策任务。深度学习是一种通过多层神经网络进行学习的方法,每层神经网络可以提取数据的高级特征。深度学习模型通常包含成千上万甚至更多的参数,能够在大规模数据集上进行训练,从而获得更好的性能。通过以上步骤,我们构建并训练了一个基于深度学习的工业缺陷检测模型。模型在测试数据集上达到了较高的准确率,通过数据增强和超参数调整进一步提高了模型的性能。

zhubeibei168的博客 881

机器视觉(三)——学习机器视觉的参考顺序

刚开始接触机器视觉的朋友可以按这个一步步来学习,挺好用的 一:视觉启蒙入门 1.halcon编程,熟悉halcon环境、tuple数组、文件操作及简单的案例编程 2. halcon基础学习,halcon自定义算子封装等,进行入门编程训练 3. halcon数据类型(主要是控制变量/图像变量)和halcon人机可视化交互 4. halcon视频图像采集,单相机以及多相机 5. 图像处理基础与ROI区域 6. 图像预处理、二值化、形态学与图像区域特征提取分析 7. Halcon在VS(C#或C++)下的联合配置

lvjiyang的博客 3130

PyTorch深度学习与机器视觉完整实战教程

PyTorch是由Facebook的人工智能研究团队开发的开源机器学习库,自2016年问世以来,迅速成为研究者和开发者的首选深度学习框架。PyTorch以其动态计算图的灵活性、易用性和Pythonic的设计哲学获得了广泛的赞誉。机器视觉作为计算机视觉领域的实际应用分支,它赋予机器“看”的能力,使之能够像人类一样处理视觉信息。机器视觉系统广泛应用于工业检测、自动驾驶、医疗影像分析、安防监控等领域。张量是PyTorch中的基础数据结构,可以看做是多维数组,它支持多种操作,如加法、乘法等。

weixin_34725745的博客 857

盘点4个机器视觉和机器学习的.Net开源库

本文介绍了四个基于.NET的开源库,涵盖了机器视觉和机器学习领域。首先,ViewFaceCore是一个用于人脸识别和情感分析的库,支持人脸检测、表情分析和特征提取。其次,基于Windows系统的OCR工具,能够通过截图识别文字并自动复制到剪贴板。第三,PaddleOCRSharp是基于百度PaddleOCR的.NET封装,支持图片文字识别。最后,EmguCV是OpenCV的.NET版本,提供图像处理、计算机视觉、深度学习等功能。这些库为开发者提供了丰富的工具,适用于多种应用场景,如人机交互、安全监控、OCR

成长的足迹 1083

SAP MTO实战:从销售订单到生产订单的精准触发与配置详解

本文深入解析SAP系统中按订单生产(MTO)模式的核心流程与配置。详细阐述了如何通过精准配置物料主数据策略组、需求类型及计划策略(如策略50),实现从销售订单自动触发生产订单的完整链路。文章结合实战案例,指导用户打通销售与生产环节,并提供了关键事务代码与常见问题排查指南,助力企业实现以销定产,优化库存与成本控制。

weixin_29300931的博客 217

为什么RingMo能成为遥感领域的首个生成式自监督基础模型?

RingMo作为遥感领域首个生成式自监督基础模型,通过创新的图像掩码建模技术解决了传统方法在遥感图像处理中的挑战。该模型利用两百万张多元数据集进行预训练,在小目标检测、场景分类等任务上表现卓越,显著提升了性能指标。RingMo的技术突破为遥感图像解译提供了高效解决方案,降低了标注成本并增强了模型泛化能力。

ll5678的博客 691

学习机器视觉的参考顺序

一:视觉启蒙入门 1.halcon编程,熟悉halcon环境、tuple数组、文件操作及简单的案例编程 2. halcon基础学习,halcon自定义算子封装等,进行入门编程训练 3. halcon数据类型(主要是控制变量/图像变量)和halcon人机可视化交互 4. halcon视频图像采集,单相机以及多相机 5. 图像处理基础与ROI区域 6. 图像预处理、二值化、形态学与图像区域特征提取分析...

风声独行 1万+

使用光流进行 Warp 的流程

光流描述了图像帧中每个像素的运动。前向光流:描述了帧中每个像素在帧中的移动位置。后向光流:描述了帧中每个像素在帧​ 中的移动位置。水平方向的位移(x 方向),即每个像素水平移动了多少像素。垂直方向的位移(y 方向),即每个像素垂直移动了多少像素。使用光流进行 Warp 的流程Warp 是通过光流对图像进行变换的操作,旨在将前一帧的像素根据光流场映射到下一帧的对应位置。Step 1: 计算光流我们首先需要通过光流网络(如 RAFT)来估算两帧之间的光流。我们可以获得前向光流(从帧​ 到帧。

qq_44199605的博客 2108

个人Halcon学习笔记记录01 机器视觉概述

机器视觉:是指使用智能机器代替人类视觉进行物体和环境识别,通过相机采集图像并使用软件算法进行分析和理解最终使机器具有和生物视觉类似的场景感知能力。机器人视觉伺服系统组成:机器人系统,视觉系统。机器视觉硬件系统的组成:光源、镜头、相机、图像采集模块、图像处理模块、交互界面等。在使用模拟相机、数字相机和智能相机时,机器视觉的工作流程的如下图所示:课程采用了数字相机的方式,作为学生,要学习编写算法来处理采集到的图像。

E422_802的博客 1894

CMAC算法原理

2、K1 通过以下运算导出:若 L 的最高有效位等于 0,则 K1 是 L 的左移 1 位。3、K2 通过如下运算导出:若 K1 的最高有效位等于 0,则 K2 是 K1 的左移 1 位。采用了 AES 算法中的类似 CBC 模式的加密方式,即对前一个分组的密文与当前分组的明文进行异或操作后在加密,2、分块处理:首先将消息分成多个固定长度的块,若消息长度不是块大小的倍数,则可以使用填充来将其填充到合适的大小。1、子密钥计算,通过主密钥生成子密钥(key1,key2),子密钥用于最后一个块处理;

sky的博客 1659

NVIDIA Jetson AGX Xavier设置风扇转速、工作模式及性能监控

Xavier的风扇在开机之后是默认关闭的,每次重启都需要手动打开风扇,后续可能考虑修改bashrc文件进行自动开启 这个是显示当前风扇的转速,默认应该是0,表示关闭,最大是250 cat /sys/devices/pwm-fan/target_pwm 可以通过修改该文件的值来修改风扇转速 vim /sys/devices/pwm-fan/target_pwm 我一般使用的是100这个值 作者:ryan_ren 链接:https://www.jianshu.com/p/d3c2041f7f7d 来源:简书 著

weixin_43877080的博客 1万+

机器视觉学习 10 8

简单来说,​灰度二值化的核心意义是将一幅包含丰富灰度信息的图像,转换成一张只包含纯黑和纯白两种颜色的图像,从而极大地简化图像,突出目标物体的轮廓和结构,为后续的分析和识别铺平道路。​​下面我们从几个层面来深入理解它的意义:一、什么是灰度二值化?​灰度图像​:每个像素点的亮度用0-255之间的一个数值表示。0代表纯黑,255代表纯白,中间是不同深浅的灰色。​二值图像​:每个像素点的值非0即255​(或非0即1)。也就是说,图像中只剩下两种颜色:黑色和白色。

programming_wang的博客 870

STM32cubeMX配置FreeRTOS软件定时器

文章目录前言1.软件定时器概述一.软件定时器特性二、使用cubeMX生成软件定时器总结 前言 本文主要带大家了解什么是软件定时器,并且带大家使用cubeMX配置软件定时器。 1.软件定时器概述 一.软件定时器特性 软件定时器就是一个闹钟当时间到了就执行相对应的任务或者代码。软件定时器是基于系统滴答中断的。在FreeRTOS中我们可以设置无数个软件定时器。 指定时间:启动定时器和运行回调函数,两者的间隔被称为定时器的周期 (period)。 指定类型定时器有两种类型: 1.一次性 这类定时器启动后,它的回调函

m0_49476241的博客 6952
上一篇: 机器视觉学习 8 12
下一篇: 机器视觉学习 10 8
漂泊到未知海岸
博客等级 码龄3年 12粉丝 11原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值