AI News HubLIVE
站内改写1 分钟阅读

DreamCharacter-1:从3D生成基础模型到产品级角色生成

DreamCharacter-1是一个轻量级后适配框架,通过几何后训练、纹理后训练和推理加速三个组件,将预训练的3D基础模型校准为高保真、可投入生产的3D角色生成方案。实验表明,其生成的3D角色资产在视觉吸引力和结构稳健性上均超越现有最先进方法。

来源arXiv Computer Vision作者: Weizhe Liu, Yunjie Wu, Xiangqian Shu, Guangwei Wang, Xiangyu Xu, Peng Li, Yujie Li, Hengkai Guo

近日,一个来自多家机构的研究团队联合提出了DreamCharacter-1框架,该框架旨在将预训练的3D基础模型转化为可直接用于生产环境的高保真3D角色生成工具。与传统的从头训练或大规模微调不同,DreamCharacter-1是一种轻量级后适配方法,它通过在已有的3D基础骨干网络上添加三个任务导向的组件来实现性能提升,而无需重新训练整个模型。

第一个组件是几何后训练模块。该模块采用了几何偏好优化技术,能够显著提升角色表面的细微几何细节。例如,它可以使模型生成更精细的凹凸、皱纹、肌肉线条等特征,从而让角色的外观更加真实和生动。第二个组件是纹理后训练模块,它负责合成高分辨率的纹理贴图,并特别针对原始基础模型在遮挡区域(如腋下、耳后、手指间等)的纹理模糊问题进行了优化。通过这种方式,角色从任何角度观看都具备一致且逼真的外观。第三个组件是推理加速模块,它集成了多种优化技术,使得整个框架能够在实际应用中实现快速推理和高度可扩展的部署,从而满足工业级应用的需求。

在实验部分,研究团队在多个公开数据集上进行了全面的定量和定性评估。评估指标包括视觉质量、几何完整性、纹理真实性和生成速度等。结果显示,DreamCharacter-1生成的3D角色资产在各个方面都显著优于当前最先进的角色生成方法。例如,在用户调研中,DreamCharacter-1生成的角色在视觉吸引力上获得了更高的评分;在几何精度测试中,其表面细节的保真度也明显领先。这项工作为3D角色生成从学术研究走向实际产品应用提供了一条可行的技术路径,有望在游戏、影视、虚拟现实等领域发挥重要作用。