我发现的一些很酷的“2D图像到3D网格物体”人工智能研究 - 2022年7月

3D人体建模技术新进展：从Pifu HT到Icon、Human Nerf和Shapy

本文介绍了近年来3D人体建模技术的几个重要进展，包括：

1. Icon（Implicit Close to Humans obtained from Normals）：

• 作为Pifu HT的升级版本，Icon在生成3D人体模型方面取得了显著进步。
• 它能够处理极端姿势，并从400张图片生成可动画的虚拟人物。
• Icon在准确性方面超越了Pifu HT和其他类似研究，在官方演示中展现了其优越性。

2. Human Nerf（free viewpoint rendering of moving people from monocular video）：

• Human Nerf通过单视角视频生成3D人物模型，包括视频中未展现的部分。
• 虽然模型的完整度和光滑度可能不如Icon，但它在生成逼真的人物模型方面表现出色。
• Human Nerf在手部等细节方面不如Icon精确，可能会导致模型变形。

3. Shapy（accurate 3D body shape regression using metric and semantic attributes）：

• Shapy专注于从图像中准确估计人体形状。
• 与其他研究不同，Shapy的应用场景可能包括测量人体尺寸，用于服装定制等。

4. IAM Avatar（implicit morphable head avatars from videos）：

• IAM Avatar专注于人脸建模，弥补了传统3D MM和Nerf模型的不足。

总而言之，这些研究展示了3D人体建模技术的快速发展，未来将有更多突破和应用。