浑元 3D 2.0 的核心采用了复杂的两阶段生成流程。第一阶段涉及创建高质量的裸网格,这由名为 Hunyuan3D-DiT 的大规模形状生成模型处理。该组件基于可扩展的基于流的扩散变换器构建,能够生成与给定条件图像精确对齐的几何图形。第二阶段专注于合成详细的纹理贴图,这由名为 Hunyuan3D-Paint 的大规模纹理合成模型管理。该模型利用强大的几何和扩散先验为 AI 生成的和手工制作的网格生成高分辨率、生动的纹理贴图。
Hunyuan 3D 2.0 最令人印象深刻的方面之一是它能够从各种输入生成完整的 3D 模型,包括文本描述、参考图像、黑白线条草图甚至肖像照片。这种多功能性使其成为从游戏开发和电子商务到娱乐和虚拟现实等广泛应用的宝贵工具。
该系统的功能不仅限于模型生成。Hunyuan 3D 2.0 还提供了一套全面的 3D 资源处理和增强工具。用户可以利用模型的自动骨架绑定、丰富的动画预设库以及人形和动物模型的直接动画预览等功能。该平台还支持生成具有可自定义优化强度的低多边形模型,这对于希望减少硬件计算需求的游戏开发者来说特别有用。
腾讯还开发了Hunyuan3D-Studio,这是一个用户友好的制作平台,为编辑、动画和导出3D资产提供无缝的体验。该工具包基于 Web,允许用户将草图转换为 3D 模型、简化复杂设计并为角色制作动画,但访问需要登录。
浑元 3D 2.0 的主要功能:
- 多模态 3D 生成(文本转 3D、图像转 3D、草图转 3D、肖像转 3D)
- 具有复杂细节的高精度几何体生成
- 支持 PBR 材质的高分辨率纹理合成
- 一键生成 3D 动画并自动绑定骨架
- 具有风格化纹理生成和材质转换的智能纹理系统
- 具有可自定义优化的低多边形模型生成
- 具有灵活光源控制的自定义渲染系统
- 在 Hugging Face 和 GitHub 等平台上开源
- 快速生成 3D 模型(10-25 秒每个模型)
- 支持 AI 生成和手工制作的网格
浑元 3D 2.0 代表了 AI 驱动的 3D 内容创作的重大进步,提供了强大而多功能的工具集,有可能彻底改变多个行业的工作流程。