Meta 3D Gen:文本到3D资产生成的一种新的先进快速管道

lhw 2024年7月5日14:00:24
评论
摘要

Meta推出了Meta 3D Gen(3DGen),这是用于文本到3D资产生成的一种先进快速管道。3DGen可在不到一分钟的时间内支持具有高即时保真度和高质量3D形状和纹理的3D资产创建。

Meta推出了Meta 3D Gen(3DGen),这是用于文本到3D资产生成的一种先进快速管道。3DGen可在不到一分钟的时间内支持具有高即时保真度和高质量3D形状和纹理的3D资产创建。

Meta 3D Gen:文本到3D资产生成的一种新的先进快速管道

文本到3D是指从文本生成3D内容,如角色、道具和场景的问题描述。创作3D内容是设计中最耗时和最具挑战性的方面之一,涉及开发游戏、增强现实和虚拟现实应用,以及电影中的特效等行业。通过可兼任为3D艺术家的3DGen,Meta可以实现以新体验为中心创建个性化的、用户生成的3D内容。

3DGen还可以支持许多其他的应用,例如用户生成视频中的虚拟产品植入。人工智能驱动的3D生成也是如此,这对于在虚拟世界中构建无限大的虚拟世界非常重要。3DGen具有其他形式的媒体生成所没有的独特和困难的挑战:图片和视频。制作3D内容在艺术质量和速度方面具有严格的标准:三维网格的生成、结构和拓扑质量、UV贴图的结构和纹理清晰度和分辨率。

Meta 3D Gen:文本到3D资产生成的一种新的先进快速管道

3DGen支持基于物理的渲染(PBR),这是在实际应用中重照明3D资产所必需的。此外,3DGen 还支持使用用户提供的额外文本输入对先前生成的(或创作者创建的)3D形状进行生成性重新纹理化。

3DGen集成了Meta分别为文本到3D和文本到纹理生成开发的关键技术组件Meta 3D AssetGen(这是文本到3D生成的一项重大进步,它可以生成具有纹理和材质控制的高质量网格;与在3D对象外观中烘焙阴影的工作相比,AssetGen输出基于物理的PBR材质,支持逼真的重照明。)和Meta 3D TextureGen(文本到图像模型的可用性和适应性为许多相关领域开启了一个新时代,其中之一就是3D对象纹理生成。尽管纹理生成方法通过使用文本到图像网络取得了令人印象深刻的结果,但对于将纹理生成推进到实际应用至关重要的全局一致性、质量和速度的组合仍然难以实现。),通过整合,3DGen可同时以三种方式表示3D对象:在视图空间、体积空间和UV(或纹理)空间中。

相对于单阶段模型,这两种技术的集成实现了68%的成功率。Meta将3DGen与众多行业基线进行了比较,并表明3DGen在复杂文本提示的保真度和视觉质量方面优于AssetGen和TextureGen,同时速度明显更快。

 

来源:93913
稿件/商务合作: 向前(微信 Shixiangqian7)电话:18700987744
创始人:张明军(微信 13720775110)
更多精彩内容,请关注ARinChina微信公众号(ID:X增强现实)
weinxin
我的微信
这是我的微信扫一扫
广告也精彩
lhw
  • 本文由 发表于 2024年7月5日14:00:24
  • 转载请注明:https://www.arinchina.com/22501.html
广告也精彩
匿名

发表评论

匿名网友 填写信息

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: