OnmyojiAutoScript悬赏封印功能中庭院式神高度导致的识别问题分析

OnmyojiAutoScript悬赏封印功能中庭院式神高度导致的识别问题分析

OnmyojiAutoScript Onmyoji Auto Script | 阴阳师脚本 项目地址: https://gitcode.com/gh_mirrors/on/OnmyojiAutoScript

问题背景

在OnmyojiAutoScript自动化脚本项目中，悬赏封印功能模块出现了一个有趣的界面识别问题。当玩家在游戏庭院中使用某些高度较高的式神（如SP千姬）作为展示角色时，系统无法正确识别悬赏封印界面中的"封"字按钮，导致自动化流程中断。

技术原理

该功能模块基于计算机视觉技术实现界面元素识别，主要依赖以下技术点：

1. ROI（感兴趣区域）定位：脚本预先定义了需要识别的界面元素在屏幕中的大致位置范围
2. 模板匹配：通过与预存的"封"字模板图像进行比对来确认界面状态
3. OCR识别：部分情况下会使用光学字符识别技术辅助确认界面文字

问题根源分析

经过技术团队排查，发现问题产生的主要原因在于：

1. ROI区域定义不够灵活：当前对"封"字的识别区域是固定坐标范围
2. 高模型式神遮挡：SP千姬等高大式神的模型会部分遮挡界面下方的UI元素
3. 界面适配不足：未充分考虑不同式神展示对UI布局的影响

解决方案

项目团队通过以下方式解决了该问题：

1. 调整ROI区域：重新定义了"封"字的识别区域，避开可能被遮挡的位置
2. 增加容错机制：在识别失败时尝试滑动屏幕查看完整界面
3. 优化模板匹配参数：提高识别算法的鲁棒性

技术启示

这个案例为我们提供了宝贵的经验：

1. UI自动化测试需要考虑各种边界情况：即使是看似简单的界面元素识别，也需要考虑游戏内各种可能的展示状态
2. 动态ROI的重要性：固定坐标的识别方式在复杂游戏环境中容易失效
3. 用户场景的多样性：自动化工具需要适应玩家各种可能的游戏内配置

总结

OnmyojiAutoScript通过这次问题修复，进一步提升了悬赏封印功能的稳定性。这也提醒开发者在设计游戏自动化工具时，需要充分考虑游戏内各种可能的视觉变化，建立更加健壮的识别机制。未来可以考虑引入更智能的界面元素定位方式，如基于深度学习的动态UI分析，以应对更复杂的游戏环境。

OnmyojiAutoScript Onmyoji Auto Script | 阴阳师脚本 项目地址: https://gitcode.com/gh_mirrors/on/OnmyojiAutoScript