单图生成上半身3D化身0.1秒生成上半身3D化身
一张图就能创建上半身动作视频，方法还入选了ICCV 2025！
来自清华大学、IDEA（粤港澳大湾区数字经济研究院）的研究人员提出新框架GUAVA，不需要多视角视频、不需要针对不同个体单人训练，仅需0.1秒就能从单图创建一个上半身3D化身。
通常来说，创建逼真且富有表现力的上半身人体化身（如包含细致面部表情和丰富手势）_，在电影、游戏和虚拟会议等领域具有重要价值。
但截至目前，仅凭单张图像实现这一目标仍然是一个重大挑战，而且同时还需要易于创建和支持实时渲染。
而GUAVA，作为第一个从单张图像创建可驱动上半身3D高斯化身的框架，与需要多视图视频或单人训练的3D方法不同——可以在秒级时间内完成推理重建，并支持实时动画和渲染。
与基于扩散模型的2D方法相比，GUAVA使用3D高斯来确保更好的ID一致性和实时渲染。而且还引入一种富有表现力的人体模型EHM，解决了现有模型在捕捉细致面部表情方面的局限性。
此外，它还利用逆纹理映射技术以准确地预测高斯纹理，并结合一个神经渲染器来提高渲染质量。
实验结果显示，GUAVA在渲染质量和效率方面优于现有2D和3D方法。
下面详细来看GUAVA所采用的方法。
