3d avatar 重建笔记

最新推荐文章于 2025-05-23 23:45:00 发布
最新推荐文章于 2025-05-23 23:45:00 发布
阅读量738 收藏
点赞数
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/studyhs/article/details/103241510

好记性不如烂笔头。本文将持续更新自己在3d avatar 重建项目的实现过程：包括数据集预处理，3dmm重建过程碰到的技术踩坑/深度学习过程的参数调优步骤，供后续回顾。

studyhs
关注
Android OpenGL ES 实现 3D 阿凡达（Avatar）效果
字节流动
05-29 5339
该原创文章首发于微信公众号：字节流动 3D 效果的壁纸 本文实现的效果 偶然间，看到技术交流群里的一位同学在做类似于上图所示的 3D 效果壁纸，乍一看效果确实挺惊艳的。当时看到素材之后，马上就萌生了一个想法：利用 OpenGL 做一个能与之媲美的 3D 效果。 拿到素材之后，就开始撸代码，想着就是简单的图像绘制加上矩阵变换嘛，花半个小时搞定它，谁曾想故事远没那么简单。另外，这里特别感谢交流群里的 @1234 同学，提供了本文所需的素材。 3D 效果实现原理 毫无疑问，这种 3D 效果选择使用 Ope.
【CVPR 2024】GART: Gaussian Articulated Template Models
zik的博客
07-09 1302
【Paper】【Project】GART 利用移动的 3D 高斯混合模型来显式地近似可变形主体的几何形状和外观。它利用了具有可学习前向蒙皮的分类模板模型先验（如 SMPL、SMAL 等），同时通过引入新的潜在骨骼进一步推广到更复杂的非刚性变形。我们介绍了高斯关节模板模型（GART），这是一种显式、高效且富有表现力的表示方法，用于从单目视频中捕捉和渲染非刚性关节主体。GART 利用移动的 3D 高斯混合模型来显式地近似可变形主体的几何形状和外观。
Python-Im2Avatar基于TensorFlow实现的单幅图像的彩色3D重建
08-11
Im2Avatar: 基于TensorFlow实现的单幅图像的彩色3D重建
真人3D Avatar
weixin_30567225的博客
10-08 1375
这是这一阶段自己搞的东东。目前还没完全完工，所以还比较粗糙。现在写个随笔，记录一下这个阶段的进展，以供以后回味 ：） 真人3D Avatar就是根据用户提供的真人照片来生成和照片一样的3D的虚拟人，可以做各种动作和表情，以及可以说话。目前我的这个方案的特点有： 1. 用户只需提供一张正面照片即可（对照片形式无限制，大头照或全身照均可）； 2. 整个生成过程基本上完全自动化（用户只需在照片...
3D 视觉与深度估计在 Android 端的实战应用：基于国产终端的三维感知与重建能力解析
最新发布
努力分享一些人工智能、计算机视觉、影像等相关的知识干货！
05-23 2568
随着国产手机厂商在 AI 芯片与多摄像头硬件方面的持续升级，3D 视觉与深度估计能力正逐步从高端设备拓展至中端机型，并通过算法优化实现软硬协同的三维感知能力。本文将聚焦 Android 平台，系统解析基于 ToF/双目摄像头或单目 AI 推理方式获取深度图的方法，并实战演示其在 AR 环境理解、三维重建、空间交互等关键场景中的落地方式。全篇强调工程实践与真实部署路径，结合国产芯片平台（如麒麟、天玑、澎湃）提供的 GPU/NPU 加速能力，提供完整可复用的代码、模型配置与性能评估方案，助力开发者打造具有空间理
我的3D化身(Avatar)
weixin_30814319的博客
10-25 466
“Avatar”源自印度梵语，本意是指“分身、化身”。互联网时代，Avatar成为网络虚拟角色（网络用户在以图像为主的虚拟世界中的虚拟形象）的代名词。而如果用户的化身就是用户自己的样子，那样就会增大用户在虚拟世界中的代入感。比如在MMORPG中，用户看到自己在游戏里成为一代大侠，那还是有成就感的，呵呵！ 我最近在搞由一张正面照片生成3D虚拟化身，基本思路是通过图像识别技术识别出照片中各特征点...
Avatar Maker Free - 3D avatar from a single selfie(免费版)
04-06
Avatar Maker，它是一个编辑器扩展插件，仅通过一张自拍照片即可生成3D头像。您可以直接从Unity Editor中使用现有照片或使用网络摄像头制作新照片，Avatar Maker会立即将其转换为可识别的3D化身。可以通过跟踪网络摄像头视频中的头部运动和面部表情来对此化身进行动画处理。 该插件仅可在WINDOWS上的Unity编辑器中使用，不能在播放模式或独立应用程序中使用。
Drivable 3D Gaussian Avatars 论文笔记
weixin_52668444的博客
01-22 1772
我个人的理解是这里需要一个volume的概念， 因为cage-based deformation的核心其实是将cage看成是coarse proxy，所以在cage里面的点就显得很重要，而一般triangle surface 它很难提供volume的概念，因为一个triangle在空间中只是平面的一个小部分， 而四面体 tetrahedra 本身就可以提供volume的概念。比如文中将 3D 高斯的Mean 表示成了从低分辨率的Mesh 采样的点的位置。这么做就等于是将之前的形变表示，转移到的高斯上。
《 Acquiring High-Fidelity 3D Avatar from a Single Image》笔记
packdge_black的博客
05-25 1361
摘要 本文提出一种，从单个图像生成，具有高分辨率UV纹理贴图的，高保真的，3D面部头像的方法。为了评估人脸的几何形状，我们使用深度神经网络直接根据给定的图像，预测3D人脸模型的顶点坐标。通过非刚性变形过程进一步完善了3D面部几何形状，以便在纹理投影之前更准确地捕获面部标志。文章方法的关键新颖之处在于，在使用高质量渲染引擎综合生成的面部图像上训练形状回归网络。此外，作者形状估算器，充分利用了，从数百万张面部图像中学到的，深度面部识别功能的辨别力。作者进行了广泛的实验，以证明优化2D到3D渲染方法的优越性..
MobiSys 2023 | mm3DFace: Nonintrusive 3D Facial Reconstruction Leveraging mmWave Signals
NLOS的博客
07-12 542
动机🚩 支持许多面部驱动的场景,包括虚拟现实(VR)模型、人机交互和情感计算应用然而，Mainstream vision-based methods 可能会面临隐私问题,并受到障碍场景和光照条件差的影响⇒⇒非侵入性的3D人脸重建系统mm3DFace,利用毫米波雷达重建连续表现面部表情的3D人脸🚩 保护隐私 + 不受光照影响step 1: 基于预处理后的毫米波信号,mm3DFace首先通过ConvNeXt模型和三重损失嵌入提取捕捉面部表情细微变化的面部几何特征step 2。
这项Avatar专利，让我看到了未来苹果生态与AR/VR头显的融合
qingtingwang的博客
10-21 1044
比如前不久，USPTO就公布了一项来自苹果的3D Avatar相关专利，其中描述了一种低成本3D形象扫描方案，可使用XR头显、手机、平板电脑、电脑摄像头来扫描头部、手部、躯干等不同的身体部位，生成的虚拟化身动作由用户控制，可在AR/VR等3D场景中移动。苹果认为，目前AR/VR的一些交互方式比较麻烦、低效、可获得的反馈有限。用户可通过这些交互方式在GUI中进行绘画、修图、演示、文字处理、制作图标、玩游戏、打电话、开视频会议、发邮件、发信息、健身、拍照、拍视频、看网页、听音乐、记笔记、看视频等等。
图片AI合成人脸 Avatar Maker Pro - 3D avatar from a single selfie U3D
03-31
图片AI合成人脸 Avatar Maker Pro - 3D avatar from a single selfie
scene-recon-android:适用于Android的3D场景重建助手应用程序
06-19
场景侦察 Scene Recon 旨在引导用户在场景中拍摄一组合适的图片，以便可以重建该场景的 3D 模型。 原作者（ ）已经登录了他的发现。 要构建此 gradle 项目，请按照以下说明进行操作。 克隆这个存储库并切换到克隆的目录。 创建一个名为local.properties的文件，并在将令牌替换为文件系统中 android sdk 的路径后添加行sdk.dir=</path> 。 运行./gradlew :SceneReconAndroidApp:assemble基于UNIX系统或gradlew.bat :SceneReconAndroidApp:assemble在基于Windows的系统。 转到目录SceneReconAndroidApp/build/outputs/apk 。 将安卓设备连接到 USB 端口。 运行adb instal
3D_Scan_Project:用于3D重建的Android客户端服务器应用程序
04-27
用于3D重建的Android客户端-服务器应用程序。 该应用程序允许使用Android设备拍摄的2D图像创建3D模型。 它通过xml容器将图像发送到服务器（包含在项目中）。 该服务器使用Java（JBoss）构建，并调用名为Bundler的SFM程序，该程序可从以下获得： : Bundler提取并匹配用于重建的一组密集的SIFT特征。 在本地服务器安装中，需要调整Bundler的路径。 并且必须在客户端中调整服务器的ip /端口。 3D_Scan_Project \ 3D_Scan \ src \ com \ example \ threedscan_demo \ ClientThreadService.java（我将在以后尝试使其更加自动化） 3D_Scan_Server依赖于以下jar文件： commons-codec-1.9.jar commons-io-2.4.ja
LiAg:LiAg（LiXin Avatar Generator）是在React.js和WebGL中实现的开源3D化身建模软件，它提供Web端3D化身建模和渲染服务，用户可以将化身导出到STL文件中，以用于3D打印。
04-29
锂银 LiAg（Li Xin（Justin Lee）Avatar Generator）是在React.js和WebGL中实现的开源3D化身建模软件，它提供Web端3D化身建模和渲染服务，用户可以将化身导出到STL文件中，该文件可以用于3D打印。 要求 node.js v15.11.0 react.js 17.0.1 three.js 0.126.1 版本 1.0.0 平台相容性 iOS（无计划支持） iPad操作系统 苹果系统 Linux Windows 10 安装指南 在终端中运行以下代码以安装和运行项目。 git clone https://github.com/realJustinLee/LiAg.git cd LiAg npm run reinstall npm start 屏幕截图 组件选择器 姿势编辑器 导出的STL模型 去做 将此项目发布到带有电子版的桌
Unity 3D 人形角色动画（Avatar）｜｜Unity 3D 导航系统｜｜Unity 3D 障碍物
爱编程的鱼的博客
01-16 4643
适合人形角色动画的制作，人形骨架是在游戏中普遍采用的一种骨架结构。。由于人形骨架在骨骼结构上的相似性，用户可以将动画效果从一个人形骨架映射到另一个人形骨架，从而实现动画重定向功能。除了极少数情况之外，人物模型均具有相同的基本结构，即头部、躯干、四肢等。正是利用这一点来简化骨架绑定和动画控制过程。创建模型动画的一个基本步骤就是建立一个从的简化人形骨架到用户实际提供的骨架的映射，这种映射关系称为Avatar。在导入一个角色动画模型之后，可以在 Import Settings 面板中的Rig 选项。
StyleAvatar3D: 高保真3D虚拟形象生成教程
gitblog_00718的博客
08-31 762
StyleAvatar3D: 高保真3D虚拟形象生成教程 StyleAvatar3D项目地址:https://gitcode.com/gh_mirrors/st/StyleAvatar3D 项目介绍 StyleAvatar3D是一个创新的开源项目，由Chi Zhang等研究人员开发，旨在利用图像文本扩散模型生成高质量的个性化3D化身。该项目解决了3D资源多样性的挑战，允许用户基于单一视频实时创建...
Avatar 三维引擎
luoyexunxue的博客
10-15 2355
这是我的一个业余项目，Avatar 是一款跨平台高性能的3D引擎，底层采用 C++ 开发，目前支持 Windows、Linux、 Android 三个平台。渲染部分基于 OpenGL3.3/ES3.0，引擎具有很高的可移植性，除了 freetype、glew、libcurl、 libjpeg、libpng、lua、mpg123、openal、rapidxml、zlib 这些开源的第三方库以...
利用Avatar Maker Pro制作无限制3D头像
资源摘要信息:"Avatar Maker Pro是Unity平台下的一款3D人物头像生成插件，版本号为1.3.1。该插件允许用户通过上传一张自拍照片，快速且简单地创建出高精度的3D虚拟人物头像。该版本为Pro版，提供了无次数限制的功能...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值