模力方舟上线腾讯混元Hunyuan3D-2.0,mini版4080就能跑!

开源其实不简单 2025-03-19 21:53:03

3 月 18 日,腾讯混元宣布推出 5 个全新 3D 生成模型,并全部开源。这些基于 Hunyuan3D-2.0 打造的模型具有更快的生成速度、更丰富的细节和更逼真的材质表达。

其中多视图版本模型Hunyuan3D-2-MV和轻量级模型Hunyuan3D-2mini现已上线模力方舟,供开发者们下载体验。

Hunyuan3D-2-MV链接:https://ai.gitee.com/hf-models/tencent/Hunyuan3D-2mv

Hunyuan3D-2mini链接:https://ai.gitee.com/hf-models/tencent/Hunyuan3D-2mini

本次上线的Hunyuan3D-2-MV模型可以通过结合多个视图的输入信息,能够更好地捕捉细节并生成符合用户预期的 3D 资产。

而轻量级 mini 系列模型Hunyuan3D-2mini则通过模型架构优化与运行效率提升,进一步降低了算力成本,其几何模型可以部署在 RTX 4080 显卡甚至苹果 M1 Pro 芯片上,为模型的应用扩展了场景。

模型架构

Hunyuan3D 2.0 中包含了两个基础组件:一个大规模形状生成模型Hunyuan3D-DiT和一个大规模纹理合成模型Hunyuan3D-Paint。

Hunyuan3D 2.0 整体架构如上图所示。该架构由两个主要组件组成:Hunyuan3D-DiT负责从输入图像生成裸网格,Hunyuan3D-Paint负责为生成的裸网格生成纹理贴图。随后Hunyuan3D-Paint以几何条件(生成网格的法线贴图和位置贴图)作为输入,并生成多视图图像用于纹理烘焙。

模型性能

腾讯混元团队也针对 Hunyuan3D 2.0 进行了全方位的评估,在 3D 形状生成、纹理贴图合成以及纹理化 3D 资产生成三个方面测评中,Hunyuan3D 2.0 均有不俗表现。

3D 形状生成

图中展示了输入图像及各方法生成的裸网格(蓝色涂层用于呈现更多细节)。人脸和钢琴键的对比显示,Hunyuan3D-DiT能够合成细腻的表面起伏,并保持整体完整性。

纹理贴图合成

Hunyuan3D-Paint能够生成与形状高度匹配的纹理。足球的结果显示,该模型能够合成无缝且清晰的纹理贴图。此外,Hunyuan3D-Paint 还能生成复杂的纹理贴图,如城堡和小熊玩偶。

3D 资产生成

Hunyuan3D 2.0能够合成精细的表面起伏并生成准确的纹理贴图。第二个企鹅展示了该模型处理复杂动作的能力。最后的山体证明,Hunyuan3D-DiT能够生成复杂的结构,而Hunyuan3D-Paint可以合成生动的纹理贴图。

点击链接:https://ai.gitee.com/huggingface/tencent,现在就去模力方舟下载体验Hunyuan3D-2.0吧!

0 阅读:0
开源其实不简单

开源其实不简单

感谢大家的关注