开源速报｜基于纯图像的游戏AI框架开源了！

最新推荐文章于 2025-11-11 19:12:29 发布
原创 最新推荐文章于 2025-11-11 19:12:29 发布 · 1.2k 阅读 · 4 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#游戏 #python #java #人工智能 #编程语言

APAIST是一款开源的游戏自动化AI框架，基于游戏图像输入，直接输出模拟触屏操作，无需游戏API。框架包括SDKTool和AI SDK，支持多种图像识别算法，适用于游戏自动化测试。2.0版本新增模仿学习、强化学习算法、一体化IDE工具和UI智能探索等功能，支持多种操作系统和设备。已应用于多种类型游戏自动化测试。

01

框架介绍

APAIST是用于开发游戏自动化AI的开源框架(开源项目名为GameAISDK)。项目的特点是以游戏图像为输入，直接输出模拟触屏操作，不依赖游戏端提供任何API接口。

 APAIST 框架

APAIST框架主要包括SDKTool(配置文件工具)，AI SDK两部分。SDKTool帮助我们生成跟具体游戏相关的AI SDK所需要配置文件。如游戏运行过程中，整个流程中需要动作交互的UI，需要识别的游戏元素等。AI开发过程中用到的信息可来自于游戏图像(AIClient获取)或其他数据。aitest 能够自动化完成游戏UI操作并进入游戏场景，像玩家一样操作手机玩游戏。

AI SDK部分主要包括AI Clinet模块， MC模块，IO模块， UI模块， GameReg模块，AI模块。

- AI Client主要与手机端交互，获取游戏图像，并执行UI或AI输出的动作

- IO模块与AI Client交互，作为AI SDK的数据输入输出控制

- MC模块与IO模块交互，将数据分发至AI SDK后端的UI和AI模块，并做一些业务逻辑的管理控制

- UI模

最低0.47元/天 解锁文章
tencent__open
关注
论文速报《BEV-LIO(LC): 提升稀疏点云SLAM精度的新框架》
lovely_yoshino的博客
03-07 8139
随着LiDAR-惯性里程计（LIO）技术的快速发展，结合LiDAR和惯性传感器的SLAM（同时定位与建图）系统在精度和效率上取得了显著进展。然而，稀疏点云的挑战依然存在，尤其是在特征提取和定位精度方面。为了应对这些挑战，本文提出了一种新的LIO框架——BEV-LIO(LC)，该框架通过将LiDAR数据的鸟瞰视图（BEV）表示与几何配准相结合，并通过特征匹配实现鲁棒的回环闭合检测，显著提升了稀疏点云SLAM的性能。
论文速报《ObjectVLA：无需标注，解决端到端模型在开放世界中的泛化能力》
lovely_yoshino的博客
03-07 8043
模仿学习作为一种有效的机器人学习方法，能够帮助机器人掌握复杂的操控技能。然而，现有的模仿学习模型通常依赖大量的人类演示数据，这在动态和多变的现实环境中造成了显著的限制，尤其是在物体泛化方面。物体泛化是指机器人能够将学到的技能应用于未见过的新物体，然而当前的模型在这一挑战上表现不佳。本文提出了一种名为ObjectVLA的框架，旨在通过视觉-语言-动作（VLA）模型实现物体泛化，从而减少对大量人类演示数据的依赖。
基于图像的游戏AI自动化框架-Python开发
05-25
AI SDK平台 是一个基于游戏图像来开发游戏AI的开源工具包。工具包主要完成了UI检测，游戏内元素识别，AI算法(DQN，IM)等功能。可以基于这个工具包完成游戏自动化测试。目前已支持的游戏类型有跑酷类，吃鸡类，射击类，MOBA类等。 AI SDK平台 AI SDK平台 是一个基于游戏图像来开发游戏AI的开源工具包。工具包主要完成了UI检测，游戏内元素识别，AI算法(DQN，IM)等功能。可以基于这个工具包完成游戏自动化测试。目前已支持的游戏类型有跑酷类，吃鸡类，射击类，MOBA类等。 工具包主要包括AI SDK，AI Client，SDKTool(配置文件工具)这几部分。 SDKTool帮助我们生成跟具体游戏相关的AI SDK所需要配置文件。如游戏运行过程中，整个流程中需要动作交互的UI，需要识别的游戏元素等。AI开发过程中用到的信息可来自于游戏图像(AI Client获取)或其他数据。AI SDK能够自动化完成游戏UI操作并进入游戏场景，像玩家一样操作手机玩游戏。 ​ 图 1 AI SDK 模块图 其中AI SDK部分主要包括AI Clinet模块， MC模块，IO模块， UI
游戏引擎剖析（十）
Nicholas黎的专栏
11-07 1077
原文作者：Jake Simpson译者： 向海第10部分: 人工智能和导航（路径发现）人工智能（AI）　　我们上面已经用了其他九个章节介绍了游戏引擎，现在让我们深入到非常有趣和重要的人工智能主题。人工智能如今正在变成被谈论得最多的仅次于游戏引擎渲染能力的游戏开发领域之一，确实如此。直到大约两年半以前，游戏似乎主要是在考虑你能够渲染多少个多边形，眼睛是多么的漂亮，和… 好…劳拉的胸部是多么的有弹性.
游戏AI框架
weixin_30627381的博客
12-01 332
转载于:https://www.cnblogs.com/luozhengquan/p/6121902.html
腾讯IEG开源GAME AI SDK：自动化测试吃鸡、MOBA类游戏
zandaoguang的博客
08-27 3000
视学算法报道编辑：陈萍、魔王转载自公众号：机器之心SDK 还能自动玩游戏？这个 SDK 有点「酷」。近日，腾讯互娱（IEG）开源了一款名为 GAME AI SDK 的自动化测试平台，该平...
AIGame：开启智能游戏开发新纪元
gitblog_01053的博客
09-16 1437
AIGame：开启智能游戏开发新纪元 项目介绍 AIGame 是一个创新的开源项目，旨在利用人工智能技术推动游戏开发的边界。通过集成先进的AI算法，AIGame不仅能够自动生成游戏内容，还能实现智能化的游戏设计和优化。无论你是游戏开发者、AI爱好者，还是对智能游戏充满好奇的探索者，AIGame都将为你提供一个全新的平台，让你在游戏开发中体验到AI的无限可能。 项目技术分析 AIGame的核心技术架...
对接Zotero或本地偏好的Paper Agent（已开源可用）
m0_60388871的博客
07-16 1042
是一个专为科研人员、学生和技术爱好者打造的智能工具。现在就访问我们的 GitHub 仓库，只需简单的三步配置，即可拥有您的专属 AI 研究助理！厌倦了在信息的海洋中迷失方向吗？想让您的科研效率提升到一个新的水平吗？生成 Markdown 每日速报。获取 Zotero 近期论文。查询 arXiv 最新论文。LLM 生成深度摘要。
【AGI-Eval实测速报】Qwen3 四大维度开箱评测，模型实测效果大放送！
AGI_Eval的博客
05-12 1191
经验证模型的回答存在幻觉：航班、酒店信息和价格不存在，没有考虑到实际因素，五一节假日期间是机酒价格高峰，只是按照要求'1万元以内'做出的计划，但与实际航班信息不相符，价格信息也不准确，一趟从上海飞往马尔代夫马累市的机票价格就在2600~11200元之间，只是围绕要求的合理性，由于临期价格出现较大波动，而未参考实际性，存在模型幻觉。prompt：我想用20w进行理财，我能承受的风险属于低风险，我的目标是：最低要求是保本，一个月最好能获得1000-2000元的收益；的实测情况究竟是怎么样的？
Java-AI-Game-Project：人工智能玩游戏（我的项目）
02-11
Java-AI-Game-Project！ 玩游戏的人工智能！ 从一开始就找到完成！ 迷宫求解器！
OpenSteer领航AI C++开源库
03-22
一个开源的c++领航ai（Steering behavior, steering AI）库。 OpenSteer is a C++ library to help build steering behaviors for autonomous characters in games and animation. OpenSteer provides an app which displays predefined demos of steering behaviors. You can prototype, visualize and debug your own as a plug-in.
GameAISDK:基于图像的游戏AI自动化框架
03-17
AI SDK平台 AI SDK平台是一个基于游戏图像来开发游戏AI的开源工具包。工具包主要完成了UI检测，游戏内部元素识别，AI算法（DQN，IM）等功能。可以基于这个工具包完成游戏自动化测试。目前已支持的游戏类型有跑酷类，吃鸡类，射击类，MOBA类等。 工具包主要包括AI SDK，AI Client，SDKTool（配置文件工具）这几部分。 SDKTool帮助我们生成跟特定游戏相关的AI SDK所需要的配置文件。如游戏运行过程中，整个流程中需要动作交互的UI，需要识别的游戏元素等。 AI SDK能够自动化完成游戏UI操作并进入游戏场景，像玩家一样操作手机玩游戏。 图1 AI SDK模块图 其中AI SDK部分主要包括AI Clinet模块，MC模块，IO模块，UI模块，GameReg模块，AI模块。 AI Client主要与手机端交互，获取游戏图像，并执行UI或AI输出的动作 IO模
百度 AI SDK
01-20
调用里面的方法能识别花草和动物，能识别文字等。赶紧下载学习吧
开源项目推荐：AI游戏开发工具集
最新发布
gitblog_01102的博客
11-11 707
AI技术正日益改变游戏开发的面貌，而[Yuan-ManX](https://github.com/Yuan-ManX)团队开源的AI游戏开发工具集正是为了帮助开发者更好地利用这一技术。以下是对该项目的详细介绍。 ## 项目基础介绍 该项目是一个开源的AI游戏开发工具集，旨在为游戏开发者提供全面的AI解决方案。主要使用的技术栈包括但不限于Python、C++、以及Unity等编程语言和环境。
Game AI SDK开源发布：基于图像的游戏场景自动化框架
wetest_tencent的博客
09-14 3171
导语 2020年7月，我们探讨了AI与自动化测试的关系，并向大家介绍了腾讯互动娱乐事业群TuringLab团队出版的《AI自动化测试：技术原理、平台搭建与工程实践》一书。这本书将TuringLab团队基于深度学习的自动化AI测试框架基础的开发与应用经验详细的展示在读者面前，与读者分享了腾讯游戏是如何将AI技术与自动化测试相结合完成测试需求的。在文章推送（超链接：https://mp.weixin.qq.com/s/vKhfddXnWZFXcQmU1734xQ）后，不少用户留言反馈了对书中提到的AI SDK的
游戏自动化AI的开源框架Game AI SDK正式开源
腾讯开源
08-18 2408
Game AI SDK是用于开发游戏自动化AI的开源框架。项目的特点是以游戏图像为输入，直接输出模拟触屏操作，不依赖游戏端提供任何API接口。适用场景主要适用于游戏场景的自动化测试，目前...
5 款最佳开源 AI 图像生成器推荐
hongfu951的专栏
06-25 7092
现在，AI 文本生成图像的工具已经无处不在，并且使用起来越来越方便。虽然简单地访问一个网站就可以生成你想要的图像，但如果你想对生成过程有更多的控制，选择开源的文本生成图像器是最佳选择。
让AI真正玩学会游戏-我的强化学习之旅
qq_28816871的博客
06-25 875
记录一下，我从百度飞桨深度学习学院 《强化学习7日打卡营-世界冠军带你从零实践》，了解到的东西吧。。。 这不是按键精灵，靠颜色判断来打怪 这不是游戏辅助，用内存读写来刷图 而是真正的让AI学会玩游戏。。。 这就叫做-强化学习 什么是强化学习 强化学习（英语：Reinforcement learning，简称RL）是机器学习中的一个领域，强调如何基于环境而行动，以取得最大化的预期利益。 核心思想：智能体agent在环境environment中学习，根据环境的状态state（或观测到的obs.
【亲测免费】 游戏AI自动化框架——GameAISDK使用教程
gitblog_00308的博客
03-30 717
GameAISDK 是由腾讯公司开源的一个基于图像的游戏AI自动化框架。该框架支持游戏AI的开发和自动化测试，能够实现图像识别、UI操作、AI算法执行等功能。GameAISDK 适用于多种类型的游戏，包括跑酷类、吃鸡类、射击类、MOBA类等，为游戏开发者和测试人员提供了强大的工具支持。 ## 2. 项目快速启动 以下是在本地环境中快速启动 GameAISDK 的步骤： ### 安装依赖 首...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值