将MediaPipeUnityPlugin示例项目打包到Android的流程

paboluo

已于 2023-11-14 22:11:42 修改

阅读量1.5k

点赞数 9

文章标签： unity 人工智能 unity3d 机器学习安卓

于 2023-07-10 21:30:40 首次发布

本文链接：https://blog.youkuaiyun.com/woshi212534/article/details/131647581

版权

文章介绍了如何下载和导入MediaPipeUnityPlugin的v0.12.0版本到Unity项目中，以及在打包成Android应用时遇到的两个问题及其解决方案。首先，调整资源导入类型为StreamingAssets以使功能在构建后生效。其次，将模型文件复制到StreamingAssets文件夹，确保运行时能正确加载MediaPipe的模型，从而成功实现手部姿态估计功能。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

下载

下载地址：https://github.com/homuler/MediaPipeUnityPlugin/releases
使用版本：v0.12.0
作者对内容做了一些删减，所以v0.12.0版本的体积缩小了很多，打包出来的APK也比较小
unity的版本最好是2022.1及以上（感谢评论区的提醒）

导入

下载unitypackage文件，直接导入项目。
可以在其中找到很多示例。这里以手部姿态估计(Hand Tracking)为例
在这里插入图片描述

初次打包

将项目转为Android，然后直接打包。
在这里插入图片描述

问题1

打包之后发现仅有相机画面，并没有进行手部姿态估计。
在这里插入图片描述
查看场景中的Solution，发现原因是默认的资源导入类型为Local，此方式仅在编辑器下有效。这里调整为StreamingAssets

问题2

第二次打包发现仍然有问题，查看报错可以发现StreamingAssets加载MediaPipe的模型文件失败了。
在这里插入图片描述
解决方法很简单，在项目Assets目录下新建一个文件夹StreamingAssets。
并将所需的三个文件palm_detection_full.bytes（手掌目标检测），hand_landmark_full.bytes（手部姿态估计），handedness.txt（目标检测的两种类别名）放入StreamingAssets文件夹中。
所有模型文件在Packages目录下的MediaPipe Unity Plugin文件夹下的MediaPipe中，不同版本的路径会略有区别
依次在这个文件夹下找到所需的三个文件，并复制到StreamingAssets中。
在这里插入图片描述