3D 版 SORA 来了!DreamTech 推出全球首个原生 3D-DiT 大模型 Direct3D

AI最新资讯4周前发布 tree
24 0 0

今日应用


今日话题


3D 版 SORA 来了!DreamTech 推出全球首个原生 3D-DiT 大模型 Direct3D
3D 版 SORA 来了!DreamTech 推出全球首个原生 3D-DiT 大模型 Direct3D
 

重点标签 Direct3D3D生成AIGCDreamTech3D技术

文章摘要


DreamTech公司在2024年5月宣布了其创新的3D生成大模型Direct3D,并发布了相应的学术论文。Direct3D是首个采用3D Diffusion Transformer (3D-DiT)技术的原生三维生成模型,它解决了以往高质量三维内容生成的难题。与以往2D图像模型升维到3D模型的技术路线相比,Direct3D的原生3D技术路线避免了2D升维的缺陷,提供了高质量、无畸形、无残缺、可商用的3D内容生成潜力。

Direct3D模型在技术实现上取得了三大突破:首先,D3D-VAE技术通过Variational Auto-Encoder提取3D数据的latent feature,显著降低了3D数据表征的复杂度;其次,D3D-DiT架构对原始DiT进行了改进,引入了语义级与像素级对齐模块,提高了输出模型与输入图像的对齐度;最后,DreamTech 3D数据引擎通过自研的数据合成技术,积累了超过2000万的高质量3D数据,为模型训练提供了强大的数据支持。

Direct3D的技术架构符合并验证了Scaling Law,即随着参数量和训练数据的增加,模型的智能程度将极大提高。DreamTech团队计划在年底前推出15B参数的Direct3D-XL,并增加5倍以上的高质量3D训练数据,预示着3D生成领域的新里程碑。

Direct3D的推出标志着3D生成领域进入了商用时代。与以往的技术方案相比,Direct3D生成的3D模型在几何结构、模型精度、表面细节、mesh面片数量等方面都有显著提升,满足了商业使用的需求。预计到2025年底,3D生成将在游戏、动漫、影视建模等行业实现大规模应用。

DreamTech公司还推出了基于Direct3D大模型的两款产品:Animeit!和3D内容创作平台。Animeit!可以将用户输入的图片或文字转换为二次元风格的3D人物形象,而3D内容创作平台则允许用户通过文本描述快速获得高质量3D模型。DreamTech致力于通过AI技术提升AIGC创作者和消费者的体验,并朝着实现通用人工智能(AGI)的目标迈进。

文章来源


原文地址: 点我阅读全文
原文作者: 机器之心

© 版权声明

相关文章

暂无评论

暂无评论...