腾讯混元3D AI创作引擎上线,并全面开源2.0版本

来源:财经网  2025-01-22 08:51

1月21日,腾讯混元宣布开源3D生成大模型2.0版本,并上线业界首个一站式3D内容AI创作平台—混元3D AI创作引擎。开发者可在GitHub、Hugging Face等技术社区下载混元3D 2.0模型,用户也可以直接在混元3D AI创作引擎上体验。

对比1.0版本,2.0版本也依然同时支持文、图生3D的能力,并在生成效果上得到显著提升,在几何结构上更加精细,纹理色彩更加丰富。

据了解,3D AIGC技术快速迭代,3D技术应用落地进程也在不断加快,游戏制作、社交、电商广告、工业制造、具身智能、自动驾驶、AR/VR、三维打印等多个领域都积极应用AI能力辅助3D内容生产,如在游戏制作环节,快速生成高质量的游戏角色、道具、建筑等3D资产,提升游戏开发效率。面向UGC社交场景,创作个人3D形象、3D虚拟礼物等3D资产。面向电商广告场景,根据创意主题生成3D商品,帮助设计师和企业降本增效。面向工业生产、制造业场景,快速生成工业产品原型验证设计。

“3D AIGC创作引擎在游戏行业的商业价值非常明确,国内有百万的相关从业者,这是一个刚需,有可能是百亿、千亿级的商业市场,而且在具身智能、自动驾驶等行业都需要3DAIGC。”腾讯混元3D AI负责人郭春超表示。

他提到,3D AI领域目前面临的最大挑战有两个,一是数据的不足,只有千万量级的数据,并且没有被充分的利用。二是3D模型本身相对于别的模态约束比较少,比如视频虽然也是横向在时间轴上拓展,但很少有突变,上一帧和下一帧只有部分的像素改变。3D的模型做任何的动作,上一个切片和下一个切片可能有很多数不清的图片,所以模型本身的挑战比较大,无论从数据而言还是从技术特点本身而言,要解决的问题都很多。

为了降低3D AI的使用门槛,腾讯混元3D AI基础模型生成、3D功能矩阵、3D编辑、3D生成工作流、创作素材库等多种功能。既支持大众爱好者生成UGC 3D内容,也助力游戏开发、设计建模等专业领域的3D生产管线。

创作引擎同时支持文生及图生3D。其中,输入中/英文提示词,描述主体内容、特征、风格等,就能快速生成4个高质量3D模型,同时,也支持上传单图即生成3D模型。效果上,可以选择不同纹理风格进行生成,同时支持PBR贴图,通过模拟物理特性可生成更逼真的材质贴图效果。

此外,创作引擎支持端到端低多边形模型生成,可根据物体复杂程度,自适应生成几百至数千面的三角面,生成结果可在低面片的基础上最大化体现模型细节,拓扑布线更加符合美术标准,更适用于游戏引擎模型渲染。

在3D功能矩阵方面,创作引擎涵盖了丰富的3D建模、编辑及驱动等能力,包括3D动画生成、3D纹理生成、草图生3D、3D人物生成、3D小游戏创作等。

3D小游戏创作支持上传一张头像并选择角色模版,一键生成个人专属IP角色的游戏动画视频,并能分享转发,让普通人也可以打造一款属于自己的3D小游戏。

值得一提的是, 混元3D AI创作引擎还支持设计3D生成工作流,呈现3D创作管线核心流程。通过模块化的节点设计搭建,帮助专业用户在游戏开发、动画制作等领域快速搭建3D生成工作流,其中包含3D角色生成与3D道具生成。用户仅需加载模版,根据个人需求输入提示词或上传图片,调整节点生成参数,即可一键生成具有特定风格和特征的3D资产,进一步降低专业用户使用门槛,大幅改进3D创作管线效率。

混元3D生成大模型1.0在去年11月全面开源,此次发布的2.0版本也依然同时支持文、图生3D的能力,此外,通过将几何、纹理解耦生成,2.0版本还在生成效果上得到显著提升,在几何结构上更加精细,纹理色彩更加丰富。

编辑:胡磊
  • 热门排行
  • 大家喜欢