flutter-skill:255个MCP工具,让AI真正“看见“并测试你的App(10个平台)

基于MCP协议的AI驱动自动化测试:flutter-skill实现零代码跨平台测试 自动化测试是软件工程中保障产品质量的关键环节,其核心原理是通过脚本模拟用户操作,验证应用功能与界面是否符合预期。传统脚本驱动测试面临定位器脆弱、维护成本高、跨平台适配复杂等挑战。随着AI智能体技术的发展,通过自然语言交互驱动测试成为新的技术方向,其价值在于将测试工程师从繁琐的脚本编写中解放出来,实现更智能、更自适应的测试覆盖。Model Context Protocol作为一种标准化AI与外部工具通信的开放协议,为AI智能体直接操作应用程序提供了统一接口,使得语义化交互成为可能。在这一技术背景下,flutt 阅读详情

前言

在 Vibe Coding 时代,AI 已经能帮我们写代码了。但有一个问题一直没解决:AI 能测试你的 App 吗?

不是跑单元测试,而是真正像用户一样:点按钮、输入文字、滑动页面、截图验证结果。

flutter-skill 就是为此而生的开源工具。它是一个 MCP (Model Context Protocol) 服务器,让 Claude、Cursor、Windsurf 等 AI 工具直接操控你的应用 UI。

GitHub: https://github.com/ai-dashboad/flutter-skill

核心亮点

  • 255 个 MCP 工具:涵盖 tap、type、scroll、screenshot、snapshot、upload_file、Shadow DOM 穿透、网络拦截、API 测试等
  • 10 个平台:Flutter iOS/Android/Web、Electron、Tauri、KMP、React Native、.NET MAUI、Web CDP、iOS Native
  • 656/664 测试通过(98.8%):全部由 AI 驱动,零手写测试代码
  • snapshot() 节省 99% Token:相比截图,无障碍树文本表示极其高效,这也是微软 Playwright MCP 在 README 中承认的痛点
  • 30 秒集成:flutter-skill init 自动检测框架并注入 Bridge SDK

与竞品对比

工具MCP 工具数平台数特色
flutter-skill25510全平台、Shadow DOM、视频录制、并行多设备
Playwright MCP (微软)~331 (Web)浏览器自动化
browser-use~151 (Web)AI 浏览器代理
Midscene~202视觉 AI 测试

快速上手

安装

# npm
npm i -g flutter-skill-mcp

# Homebrew
brew tap nicholasmurray/tap
brew install flutter-skill

# 或者直接用 Dart
dart pub global activate flutter_skill

浏览器自动化(零配置)

# 启动 serve 模式,连接到任意网站
flutter-skill serve https://your-app.com --port=3000

# AI 现在可以通过 MCP 协议控制浏览器了
# snapshot() 返回无障碍树,比截图节省 99% token

App 测试(30 秒集成)

# 自动检测框架,注入 Bridge SDK
flutter-skill init

# 启动 demo 验证
flutter-skill demo

# 在 Claude/Cursor 的 MCP 配置中添加 flutter-skill
# 然后对 AI 说:"测试登录流程"

新功能:QR 码扫码登录自动化

v0.9.6 新增 qr_login_start 和 qr_login_wait 工具,支持任何需要扫码登录的平台(微信、优快云、知乎、钉钉等):

  1. AI 调用 qr_login_start → 自动检测页面上的二维码并截图
  2. AI 将图片发到 Telegram/聊天 → 用户手机扫码
  3. AI 调用 qr_login_wait → 自动检测登录成功(URL 变化、Cookie 变化、二维码消失)

技术架构

flutter-skill 采用 WebSocket JSON-RPC 2.0 协议:

  • Bridge SDK:嵌入到目标 App 中,暴露 UI 树和操作接口
  • MCP Server:Dart 编写,处理 AI 工具调用请求
  • CDP Driver:直接通过 Chrome DevTools Protocol 操控浏览器

为什么选 WebSocket?双向通信、有状态连接、跨平台通用、JSON 可读可调试。HTTP 轮询慢 10x,gRPC 集成难 10x。

性能数据

  • tap 操作:1ms
  • CDP 连接:93ms
  • snapshot:2ms
  • screenshot:31ms

总结

flutter-skill 填补了 AI 辅助开发的最后一块拼图:让 AI 不仅能写代码,还能测试代码。

255 个工具、10 个平台、656 个测试、MIT 开源。

⭐ 如果觉得有用,欢迎 Star:https://github.com/ai-dashboad/flutter-skill

基于MCP协议的AI原生测试:用自然语言驱动Flutter等多平台应用自动化 在软件测试领域,端到端(E2E)测试是验证应用完整用户流程的关键环节,但其脚本编写与维护成本高昂。传统脚本驱动模式依赖于精确的元素定位器,导致测试用例脆弱,难以适应UI的频繁变更。模型上下文协议(MCP)作为一种新兴的开放协议,为AI智能体提供了标准化调用外部工具的能力,从而实现了从“脚本驱动”到“AI驱动”的范式转变。这一转变的核心技术价值在于,AI能够通过解析应用的可访问性树等结构化数据,动态理解页面语义并规划操作,极大提升了测试的鲁棒性和可维护性。其应用场景广泛覆盖了从本地探索性测试、CI/CD流水线 阅读详情

相关推荐

Flutter AI编程助手定制:Skills与Rules机制深度解析与实践指南

在AI辅助编程领域,大语言模型通过理解代码语法和项目上下文来生成代码。其核心原理是基于海量训练数据学习编程模式,但通用模型往往缺乏对特定技术栈或团队规范的深度理解。这一技术价值在于将AI从通用代码生成器转变为领域专家,显著提升代码质量和开发效率。应用场景广泛覆盖Flutter、React等框架的规范化开发,尤其适合需要统一架构和代码风格的团队协作。本文聚焦于通过Skills(动态知识包)和Rules(静态约束)两大机制,为Flutter AI编程助手注入专业灵魂,解决Riverpod、Bloc等状态管理库的

weixin_42525428的博客 373

实用性 Max ,新 Flutter & Dart Agent Skills 深度解读

可以看到这次更新的 Skills 实用性提高了不少,每个 Skill 都不是在描述一个功能或者说明一个文档,而是在提供决策逻辑,让 AI 不需要多想,而是通过明确指令来解决问题。

恋猫de小郭的博客 1134

【信息科学与工程学】计算机科学与自动化 第二百零一十一 软件开发模型01

编号类型模型领域模型中的知识点/因素/参数关联知识和法律法规1传统顺序模型瀑布模型 (Waterfall)通用软件开发、硬件紧密耦合系统、政府/军工项目、需求稳定的传统信息系统严格线性阶段:可行性研究→需求分析(SRS,含功能/非功能/接口/约束,使用IEEE 830模板)→系统设计(概要设计HLD:架构、模块划分、数据库ER图;详细设计LLD:伪代码、类图、接口定义)→实现(编码规范、代码审查、静态分析工具SonarQube)→测试(单元测试JUnit、集成测试、系统测试、验收测试UAT,测试计划提前编写

weixin_49199313的博客 175

Flutter 发布官方 Skills ,Flutter 在 AI 领域再添一助力

在之前的我们就聊到,如今一个项目要有发展前景,就必须能够和 AI 持续贴一起,而显然 Flutter 做到了,除了之前的 Flutter MCP ,GenUI 等 AI 相关支持产物,现在官方又新增了支持,用于补全 Flutter 在 AI 编程缺乏官方 skills 的短板。作为:告诉 AI 什么时候该选哪种方案:包含具体的代码实现和步骤:防止 AI 生成错误或过时的代码(如禁止使用已废弃的 API)

恋猫de小郭的博客 1192

flutter-skill-tree:这是一个flutter的功能树,持续更新

超适合学习的Flutter项目! 前言 面向所有对Flutter与原生互动知之甚少的开发者们 如果你是对Ios与Android不够了解的前端开发者 如果你是对Android不够了解的Ios开发者 如果你是对Ios不够了解的Android开发者 这个项目,都将会是你最好的学习材料 ps:上面这个开场动画来自于2dimension 目前项目包含的主要内容是各种需要与原生交互的插件使用。后续会继续完善此类Demo,同时也会插入一些纯Dart实现的Demo 项目介绍 功能点 目前,项目包含的功能点如下 下面是各个功能点,其中,部分功能无法在Ios的模拟器上正常使用,如视频播放功能与定位功能 功能点列表 展示 使用插件 数据存储 + File操作 相册 定位 下载 视频播放 二维码 和 自适应文本 拖拽控件 手势操作 动画与小工具组合 拖拽列表 ReorderableListView的使

ThinkBook 16 2024 Ubuntu驱动全攻略:从无线网卡到触控板

本文详细介绍了ThinkBook 16 2024在Ubuntu系统下的驱动问题解决方案,涵盖无线网卡、蓝牙、显卡和触控板等关键硬件的驱动修复步骤。通过具体命令和配置指南,帮助用户快速解决兼容性问题,提升Ubuntu在ThinkBook上的使用体验。

weixin_29200741的博客 830

Flutter 框架跨平台鸿蒙开发 - 亲子成长记录应用开发教程

本教程介绍了亲子成长记录应用的开发过程,包括数据模型设计、核心功能实现、UI组件构建等。应用功能全面,界面温馨,是记录宝宝成长的实用工具。欢迎加入开源鸿蒙跨平台社区:https://openharmonycrossplatform.youkuaiyun.com。

2301_82241198的博客 756

双目立体成像(一)双目图片生成点云

利用左右目图片生成点云

qq_62964142的博客 4555

flutter-skill 实战:255个MCP工具让AI真正“看见”并测试你的App(10个平台)

flutter-skill 把 App 界面封装成 255 个 MCP 工具,让 AI 能点击、输入、截图验证。本文从 TaoToken 接入讲起,给出 Claude Code、Cursor 等客户端的可复制配置,并整理 401、local proxy failed 等报错排查表。官网 https://taotoken.net/?utm_source=taotoken_aicg_blog_end 提供统一模型入口。

weixin_35886636的博客 190

CNN卷积神经网络手写数字识别实例及代码详解

本文的代码来自githup的Deep Learning的toolbox,是用Matlab实现的。感谢该toolbox的作者付出和分享。 我在应该该代码进行训练时,出现一些报错,如expand函数应用不对,flipall函数未定义等问题,对这些问题进行了修正,完成网络训练和验证。 本文mnist_uint8.mat的获取可以参照我的另一篇博客:MNIST数据库处理--matlab生成mnist_

VivienFu的专栏 6万+

从零构建NVENC编码器:一个游戏开发者的实战手册

本文详细介绍了如何从零构建NVENC编码器,特别针对游戏开发者提供实战指南。内容涵盖NVENC基础概念、DirectX纹理捕获、异步编码优化及高级特性配置,帮助开发者高效集成硬件编码技术到游戏引擎中,实现高性能游戏录制和直播功能。重点解析了NVIDIA专用编码芯片的优势与API使用技巧。

weixin_29292431的博客 366

flutter-skill 实战:255个MCP工具让AI看见并测试你的App(10个平台)

flutter-skill 内置255个MCP工具,让AI直接操控App界面完成点击、输入与断言。本文提供可复制配置:安装flutter-skill、注入Bridge SDK、接入TaoToken模型服务,并附401、local proxy failed等报错排查。官网:https://taotoken.net/?utm_source=taotoken_aicg_blog_end

PurpleRain89的博客 125

【异常】解决 Cursor 报错 Unexpected seqno: 2 != 1. Please try again, or contact support if the issue 的排坑指南

在使用 Cursor 辅助编程时,你是否遇到过 AI 突然中断输出,并在右下角弹出一个红色的 Network Error 弹窗?今天我们就来彻底解析并解决这个网络断连问题。

奶爸的编程之路,也就一周冷个三天 2487

TinyHand 核心原理:CGEventTap 如何拦截鼠标点击,把它变成无害的轻点

TinyHand 是一款免费开源的 macOS 小工具——屏幕上伸出一只"举着的手"帮你指东西。它最巧妙的地方在于:**按下鼠标时只会触发一次无害的"轻点"(tap),底下的应用完全收不到这次点击**。而实现这一点的核心,正是 macOS 提供的系统级事件拦截机制 **CGEventTap**。本文带你读懂 TinyHand 的拦截原理:事件在哪里被截住、为什么点击会"消失"、以及它如何保证菜单栏

gitblog_00629的博客 1115

Windows 10 本地硬盘变成了可弹出磁盘

今天新装了系统, 电脑是一个SSD+HHD, 没想到装好之后右下角显示可安全删除设备, 两个硬盘在那里. 这还得了. 查了一下午, 大致知道了是什么问题. Standard SATA AHCI controller使用高性能的硬盘模式就会把硬盘看作是一个可热插拔的存储器, 所以自然就会显示可弹出. 如果你的BIOS支持关闭HotSwap或者HotPlug, 那么直接关闭就可以了. 或者你直接在BIOS里把磁盘模式改为IDE, 不过这样就发挥不好你SSD的高性能了. 还有一种解决方法, 就是手动让系统把这两个

落日之城 4万+

BOSS直聘数据采集、解析处理、分析与可视化实战

招聘和求职是一对永恒的话题,不论什么时候都有招聘或者是求职的需求,找不找得到工作可能最主要的就是匹配度是否高,待遇福利是否诱人,如今互联网的快速发展,找工作的方式早已发生了翻天覆地的变化,从以往的面对面形式的招聘简历投递和面试方式,变成了电子简历网络直接投递、远程面试录用的形式,便捷性大大提升,需求的快速增长,促生了一批互联网招聘类的企业,诸如:51job、BOSS直聘、拉勾网等等,为了能...

Together_CZ的博客 9027

脑语言2500单字v1.5.1

如果人和 AI 说同一种语言,文明会怎样?我用 2500 个单字试了试。2500个单字是不同领域、不同知识的共同体,无论你学编程或者是数学或写作,你都要用汉字,而常用的2500个汉字几乎可以涵盖不同行业做的不同事情。

脑语言 2023

机器人在果园内行巡检仿真(2D雷达、realsense相机)

DiffBot是一种具有两个轮子的自主差动驱动机器人。它的主要处理单元是一个运行Ubuntu Mate 20.04和ROS 1 (ROS Noetic)中间件的Raspberry pi4b。该存储库包含ROS驱动包、真实机器人的ROS控制硬件接口和模拟DiffBot的配置。修改配置文件orchard_world.launch。

如果想成为中心,那么就到中心去吧。 1313

使用 AI + Flutter-OH 开发 HarmonyOS 应用

AI + Flutter OH 开发 HarmonyOS App

欢迎来到Gorit的博客 887

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

Cursor AI Skills 实战:自动生成 Flutter 页面、代码与文档

本文系统介绍如何使用 Cursor AI Skills 自动生成 Flutter 页面、初始化项目结构,并持续维护项目技术文档。适合 Flutter 开发者与 AI 编程实践者,快速构建高效、可复用的 Flutter 开发工作流。

会煮咖啡的猫咪 2045

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

Flutter 官方 Skill 发布,对开发者意味着什么?TaoToken 视角下的 AI 编程工作流

Flutter 官方 Skill 以 SKILL.md 形式为 AI Agent 提供架构与状态管理规范,执行 npx skills add flutter/skills 即可安装。本文结合 TaoToken 统一 API 通道,给出 settings.json 配置、curl 验证与 401 等报错排查步骤,让 AI 编程工作流稳定可复现。详见 https://taotoken.net/?utm_source=taotoken_aicg_blog_end

weixin_42593701的博客 13

Flutter 技术选型指南

本文全面分析了Flutter技术选型的核心要素。从技术架构看,Flutter采用Dart语言和分层设计,通过AOT编译实现接近原生的性能。文章提供了计数器、数据库操作等完整代码示例,并给出性能优化建议如使用const构造函数、ListView.builder等。同时评估了插件选择标准、团队开发规范和CI/CD配置方案,并详细介绍了从ReactNative迁移的混合开发策略。最后通过项目决策矩阵,从开发效率、性能等维度对比Flutter优劣势,为不同场景提供选型建议。

2502_94507659的博客 863

2026 AI 时代下,Flutter 和 Dart 的机遇和未来发展,AI 一体化

相信大家都感受到了 2026 的 AI 浪潮和冲击,如果说一个开源项目,或者说一个技术框架,在 2026 没能和 AI 沾边,那么能拥抱的资源肯定会越来越有限,而在这方面,实际上很多人可能还没直观感知到,不知不觉里。目前 Flutter 是跨平台框架体系里 「AI 工程化能力相对完整」 的,因为它已经囊括了:等各个领域,具体为:UI / 交互AI 规则Agent资源生成可以看到,

恋猫de小郭的博客 526

Flutter 官方 Skills 发布:用 CLI 把 AI Agent 接进 TaoToken 的实践大纲

Flutter 官方 Skills 仓库发布后,用 CLI 把 AI Agent 接入 TaoToken 统一模型通道成为关键一步。本文从 generate-skill 与 validate-skill 两条命令出发,给出 Claude Code、Cline、Codex 的可复制配置,并用 curl 最小请求验证通道,覆盖 401、local proxy failed、reading choices 等常见报错排查。详见 https://taotoken.net/?utm_source=taotoken_a

weixin_35748962的博客 207

智能测试助手:AI驱动的新一代UI自动化测试平台

在数字化转型浪潮中,企业面临着日益复杂的软件测试挑战。传统录制工具已无法满足现代应用对测试智能化、自动化和可扩展性的需求。智能测试助手作为AI驱动的新一代UI自动化测试平台,通过融合机器学习算法和智能决策引擎,重新定义了自动化测试的价值边界。 ## 技术架构创新与核心优势 智能测试助手采用分层架构设计,底层基于深度学习模型构建智能元素识别引擎,中层通过自适应算法优化测试流程,上层提供可视化操作

gitblog_00857的博客 1065
上一篇: AI驱动的E2E测试:一条命令测试任何App(支持8大平台)
下一篇: Flutter 全栈实战:DTok 类抖音源码如何帮团队省下 50 万开发费
wclhack
博客等级 码龄18年 15粉丝 11原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值