基于图像模板匹配的按钮模拟点击 based on python

最新推荐文章于 2025-03-13 15:31:05 发布
最新推荐文章于 2025-03-13 15:31:05 发布
阅读量1.4k 收藏 3
点赞数
分类专栏： Python 文章标签： 自动化办公
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/TQCAI666/article/details/81566095
版权

代码地址，也不要吝惜打一颗星~
https://github.com/TQCAI/auto_click_button_by_template_matching

目录：

最近遇到一个问题，在mathtype中用输入面板公式的时候，
没有快捷键，就连Ctrl+Z的撤销都没有，简直头痛。于是我想到了用按键精灵来解决。
一个只有按钮没有快捷键的界面：
这里写图片描述

模板匹配

参考文献：Python+OpenCV学习（7）—模板匹配 - 优快云博客
模板匹配是一种在图片中找到目标图片坐标位置的图像处理技术，如图：
这里写图片描述
通过这种技术，我们首先对整个屏幕进行截图：


                

                
                
        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        


    



                



	

		

			

				
					
python识别图标并点击

				
			

			

				

					weixin_42636075的博客
				

				

					11-07
					
					1万+
					
				

			

		

		

			
				
【代码】python识别图标并点击。

			
		

	



                

            
              



	

		

			

				
					
基于STM32设计的智能门锁(微信小程序+手机APP等多种方式开锁)(188)

				
			

			

				

					
				

				

					07-17
					
					1万+
					
				

			

		

		

			
				
当前智能门锁项目是基于STM32微控制器、ESP8266-WIFI模块、OLED显示屏、指纹模块、蓝牙模块、门禁刷卡模块、烟雾检测模块、火光检测模块、温湿度检测模块等硬件设备开发的一种智能门锁系统

			
		

	



              


  
              

                


	

		

			

				
					
python 找图点击,如何自动化Selenium点击图像按钮-通过onclick查找元素？ -Python

				
			

			

				

					weixin_29007135的博客
				

				

					03-25
					
					2504
					
				

			

		

		

			
				
因为我找不到我想要的答案。 我正在尝试自动点击红色按钮。在此处输入图像说明我自动完成了对这个站点的登录(不知道是哪个站点)，并且添加了等待函数，但是，不管是复制完整的xpath，选择器还是复制函数在“Inspect Element”中给我的其他选项，我都无法让Python执行click the button.(可能是因为按钮图像用作覆盖--可能是错误的，但在我看来是这样)。这是我使用的代码:`从s...

			
		

	





	

		

			

				
					
python如何实现自动点击网页按钮

				
			

			

				

					m0_69690804的博客
				

				

					03-13
					
					1047
					
				

			

		

		

			
				
通过本文的介绍，我们详细探讨了使用Python和Selenium实现自动点击网页按钮的方法。从安装和配置Selenium、定位网页中的按钮元素，到执行点击操作和处理复杂的网页交互，我们涵盖了所有关键步骤。此外，还介绍了进阶应用、安全和性能考虑，以帮助你在实际项目中更高效地使用Selenium进行网页自动化操作。希望本文能为你提供有价值的参考和指导。相关问答FAQs：1. 如何使用Python自动点击网页按钮？Python可以使用Selenium库来实现自动点击网页按钮。

			
		

	



		

			
		



	

		

			

				
					
Auto.js学习笔记12：利用图片的相似度执行精准目标点击(基础篇)

				
			

			

				

					PYB
				

				

					06-14
					
					6678
					
				

			

		

		

			
				
申明本人使用的autojs是4.1.1版本images模块提供了一些手机设备中常见的图片处理函数，包括截图、读写图片、图片剪裁、旋转、二值化、找色找图等。该模块分为两个部分，找图找色部分和图片处理部分。需要注意的是，image对象创建后尽量在不使用时进行回收，同时避免循环创建大量图片。因为图片是一种占用内存比较大的资源，尽管Auto.js通过各种方式（比如图片缓存机制、垃圾回收时回收图片、脚本结束时回收所有图片）尽量降低图片资源的泄漏和内存占用，但是糟糕的代码仍然可以占用大量内存。


读取本地图片imag

			
		

	





	

		

			

				
					
VS2008 MFC Halcon模板匹配例子

				
			

			

				

					horizons_kong的博客
				

				

					11-14
					
					2375
					
				

			

		

		

			
				
软件操作如下
1.如下界面


2.点击“显示图片”，可得被匹配图像，如下图


3.在被匹配图像中，点击鼠标左键，移动鼠标，松开鼠标左键，可抓取需要被匹配的模板


4.点击“模板匹配”，可得匹配结果如下




程序如下：
1.如图，添加如下控件


2.Halcon在VS中的配置，在这不做说明
3.主要程序如下:
// Halcon_MFCDlg.h

			
		

	





	

		

			

				
					
基于图像识别的ui操作--2

				
			

			

				

					weixin_44785098的博客
				

				

					02-25
					
					240
					
				

			

		

		

			
				
基本方法：
test()   —   用于对结果进行调试，显示出匹配到的位置
click()  —   简单的点击操作。
check_and_click() —  首先对匹配到的区域进行相关性计算。设置阈值就是在这时起效，相关性在阈值范围内时，将进行点击。
    def test(self):  #调试
        img = cv.rectangle(self.full_screen,(s...

			
		

	





	

		

			

				
					
Python 接口并发测试详解

				
			

			

				

					悦分享
				

				

					10-23
					
					8227
					
				

			

		

		

			
				
性能测试是通过自动化测试工具模拟多种正常、峰值及异常负载条件对系统的各项性能指标进行的测试。负载测试和压力测试都属于性能测试，两者可以结合进行。通过负载测试，确定在各种工作负载下系统的性能，目标是测试当负载逐渐增加时，系统各项性能指标的变化情况。压力测试是通过确定一个系统的瓶颈或者不能接受的性能点，来获得系统能提供的最大服务级别的测试。性能测试的重点是测试在并发条件下服务或系统的瓶颈所在，从而优化相关功能，可能涉及软件及硬件的多方面改进。由此可见，性能测试对整个产品非常重要，甚至可以决定一个产品是否能长久发

			
		

	





	

		

			

				
					
(附源码）基于PHP在线考试系统的设计与实现 毕业设计-06496

				
			

			

				

					Weixin_CXSJ881的博客
				

				

					05-03
					
					1264
					
				

			

		

		

			
				
在线考试系统主要功能模块包括登录、首页、网站管理（轮播图、校园公告）人员管理(管理员、考生用户、教师用户）内容管理（校园资讯、资讯分类、线上考试）模块管理（成绩录入）、用户账号维护，采取面对对象的开发模式进行软件的开发和硬体的架设，能很好的满足实际使用的需求，完善了对应的软体架设以及程序编码的工作，采取MySQL作为后台数据的主要存储单元，采用PHP技术、Ajax技术进行业务系统的编码及其开发，实现了本系统的全部功能...

			
		

	





	

		

			

				
					
python写梦幻西游脚本

					
最新发布

				
			

			

				

					04-18
				

			

		

		

			
				
这些工具可以模拟鼠标点击、键盘输入以及通过图像匹配定位特定区域。  #### 实现步骤详解 以下是一个基本框架，用于创建一个简单的梦幻西游自动脚本：  1. **安装必要的库**  需要先安装一些基础的 Python 库，例如 ...

			
		

	





	

		

			

				
					
Unity3d 周分享（19期 2019.6.22 ）

				
			

			

				

					游戏路上的小学生
				

				

					06-22
					
					2791
					
				

			

		

		

			
				
选自过去1~2周 自己所看到外文内容：https://twitter.com/unity3d 和各种其他博客来源吧

1、 #UnityTips您知道OnOpenAsset属性吗？ 它允许您在项目窗口中双击资源时调用方法。 例如可以用来打开/编辑一些scriptableobject。







2、https://www.febucci.com/2018/11/unity-tips-col...

			
		

	





	

		

			

				
					
Python 进行图片查找并且点击图片

				
			

			

				

					03-26
				

			

		

		

			
				
Python 进行图片查找并且点击图片
imagePath = r"D:\图片.png"
print(imagePath)
ImageSearchs = ImageSearch.ImageSearchs()
ImageSearchs.click(imagePath, 2,  timeOut=10)


			
		

	





	

		

			

				
					
按键精灵：如何识别屏幕上的数字源代码

				
			

			

				

					07-05
				

			

		

		

			
				
【官方】高级教程——如何识别屏幕上的数字.Q.txt【官方】高级教程——如何识别屏幕上的数字.Q.txt【官方】高级教程——如何识别屏幕上的数字.Q.txt【官方】高级教程——如何识别屏幕上的数字.Q.txt【官方】高级教程——如何识别屏幕上的数字.Q.txt

			
		

	





	

		

			

				
					
使用python代码判断按钮是否可用

				
			

			

				

					weixin_42594427的博客
				

				

					02-13
					
					469
					
				

			

		

		

			
				
在Python中，可以使用一些图形库，例如Tkinter，wxPython等来判断按钮是否可用。
下面是一个使用Tkinter库的代码示例：
import tkinter as tk

root = tk.Tk()

def change_state():
    if btn.config('state')[-1] == 'normal':
        btn.config(state='d...

			
		

	





	

		

			

				
					
python中pyautogui图像识别自动化

				
			

			

				

					enshileimin的专栏
				

				

					04-29
					
					1560
					
				

			

		

		

			
				
图像识别自动化

			
		

	





	

		

			

				
					
python怎么模拟点击网页按钮？

					
热门推荐

				
			

			

				

					Z_Silence的博客
				

				

					02-25
					
					1万+
					
				

			

		

		

			
				
python怎么模拟点击网页按钮
前提环境: Python3 和 Visual Studio Code安装完毕 .
安装selenium : 在终端输入: pip install selenium, 如图

下载chromedriver : 登录http://chromedriver.storage.googleapis.com/index.html 下载 (与浏览器对应版本请上网查阅)
推荐学...

			
		

	





	

		

			

				
					
python+selenium小结6：查找单选按钮并点击

				
			

			

				

					就想讲点测试
				

				

					05-08
					
					5187
					
				

			

		

		

			
				
from selenium import webdriver
import time

options = webdriver.ChromeOptions()
prefs = {
    'profile.default_content_setting_values':
        {
            'notifications': 2
        }
}
options.ad...

			
		

	





	

		

			

				
					
UI自动化：使用Python模板匹配捕获不能解析的控件

				
			

			

				

					longmingtao的博客
				

				

					11-14
					
					1253
					
				

			

		

		

			
				
引言

 但凡使用UI自动化作为自动化测试手段，必然会碰到一个灵魂拷问：控件捕获不到怎么办？

 各类框架如WebDriver，UIautomator，UIAutomation，总有由于待测对象UI实现方式多样性导致无法解析的情况，对于这些情况，有没有什么通解？

 其实很自然的想到，尽管UI实现手段上千差万别，但作为GUI控件，最终都是要体现到监视器上，如果要找到一个控件检测的通用解法，图像匹配当然是首选。

 对于UI自动化，大多数场景下，只需要获取到一个控件的3个主要信息，就可以做绝大多数的...

			
		

	





	

		

			

				
					
opencv-python 二值图像的模板匹配实现

				
			

			

				

					lustyoung的博客
				

				

					12-24
					
					4235
					
				

			

		

		

			
				
之前写过如何获得一个指静脉的二值化特征图像，传送门：opencv-python 用Gabor滤波器实现指静脉血管区域二值化纹理特征提取

然后这篇文章记录我是如何来做特征模板匹配的。

匹配评分原理：

原理：根据上述二值纹理特征提取方法，获取手指静脉纹路的二值 

纹理图像将已注册图像的 ROI 区域与待认证图片的 ROI 区域均采用二值纹理特征提取方法获得两张纹理前景图像，然后计算两张纹理前景...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值