布吉网站建设公司,宁夏自治区住房城乡建设厅网站,做网站是那个语言写的,网站策划案随着《黑神话悟空》的爆火#xff0c;3D游戏背后的AI 3D生成技术也逐渐受到更多的关注。虽然3D大模型的热度相较于语言模型和视频生成技术稍逊一筹#xff0c;但全球的3D大模型玩家们却从未放慢脚步。无论是a16z支持的Yellow#xff0c;还是李飞飞创立的World Labs#xff…随着《黑神话·悟空》的爆火3D游戏背后的AI 3D生成技术也逐渐受到更多的关注。虽然3D大模型的热度相较于语言模型和视频生成技术稍逊一筹但全球的3D大模型玩家们却从未放慢脚步。无论是a16z支持的Yellow还是李飞飞创立的World Labs3D大模型的迭代速度一直在稳步前进。近日国内3D大模型的领军者VAST发布了最新版本的大模型——Tripo 2.0。这个基于千万级高质量原生数据库训练的超强模型支持文字、单图、多图输入并在几何精细度和图像还原度上表现出色。
Tripo 2.0的生成速度极为惊人。首先它可以在几秒钟内生成几何预览接着迅速生成纹理和PBR材质将模型的细节展现得一览无遗。无论是复杂的卡通人物、怪物还是精细纹理的物品Tripo 2.0都能够轻松应对。在短短几秒内生成的3D模型其细节和质量甚至比肩传统人工建模师需要数小时才能完成的成果。
Tripo 2.0的技术突破
VAST团队通过一系列技术创新大幅提升了3D模型生成的效率和质量。Tripo 2.0采用了DiT和U-Net的混合架构既能够捕捉3D结构的全局上下文又能够保留局部特征的精细度使得生成的效果更加细腻。此外Tripo 2.0利用了最先进的流模型与蒸馏算法在不牺牲生成质量的前提下显著提升了效率。无论是生成形状的准确性、材质的精度还是整体细节的表现Tripo 2.0都达到了一个全新的高度。
Tripo 2.0的一大亮点在于其高可控性。用户可以通过多模态输入生成3D模型并能够通过负向prompt控制模型内容的生成。除此之外用户还可以调整输出模型的姿态和比例甚至可以选择模型的姿势如“A-pose”或“T-pose”这大大提升了模型生成的灵活性和适用性。
Tripo 2.0文生3D模型实测
先来一波文生3D效果的实测。首先生成的是“动漫少女的半身形象”在复杂结构的生成上细节十分丰富 接下来我们为其添加皮肤。在不超过20秒的时间内模型获得了精细的纹理和层次感人工建模可能需要成百上千倍的时间才能达到这个水平。 换个题目我们尝试生成卡通形象的全身形象——卡通小矮人。结果相当可爱配上宋丹丹式的笑声 还生成了一个带有复杂细节的小怪物。即便放大模型并360度旋转查看依然没有发现bug和瑕疵。对于人工建模师而言怪物背后的尖刺细节本是个噩梦但对Tripo来说毫无压力。 进一步加大难度Tripo依旧能完美驾驭复杂的3D模型生成任务其透视结构理解能力十分出色。 最后我们生成了一个购物车这样的复杂任务对Tripo来说也毫无难度。 Tripo 2.0图生3D模型实测
再来看一波图生3D的效果。 图生3D模型的生成算法特别考验对图片空间信息的理解和还原度。我们横向对比了一些市场上的其他玩家发现Tripo 2.0在几何形状的还原度和完整度上表现尤为突出。 测试完植物后我们尝试了无生命物体的图生模型。比如一个复活节彩蛋的图片Tripo 2.0生成的3D模型浮雕感最强纹理细节也是最精致的。 通过多次测试发现Tripo 2.0不仅在生成质量上脱颖而出其高度可控性也是一大特点。
比如生成的PBR材质具有⾼保真度保留了原图表⾯属性和视觉效果 再比如不管侧面、背面每个面都能捕捉复杂的原图特征 Tripo 2.0不仅生成质量让人眼前一亮更高的可控性也是一大特点。
输入不仅支持多模态当选择文生3D模型模式时还支持输入负向prompt就是不让生成模型中带有什么元素。 对输出模型姿态的控制性也很绝。
既能自定义所生成3D模型头、腿、手臂等比例。
还能“A-pose”“T-pose”两个姿势随便选秒秒钟设定大长腿 生成好的3D模型还可以一键绑定骨骼、风格化。
3D模型人拥有自己的乐高 更多玩法大家可以慢慢探索欢迎大家评论区共创
VAST的技术积累
VAST自2022年成立以来已在3D生成技术领域取得了多项突破。Tripo 1.0发布后短短半年内全球用户生成的3D模型就已超过500万个远超全球前三大3D模型数据库的总和。如今Tripo 2.0问世进一步巩固了VAST在3D生成AI领域的领先地位。
VAST的技术团队在学术界同样表现亮眼多次在Siggraph、CVPR、ICLR等顶级会议上发表研究成果进一步展示了其在全球3D生成AI领域的影响力。 3D生成技术的未来展望
VAST的目标是打造大众级别的3D内容创作工具建立3D的UGC内容平台让3D空间成为用户体验、内容表达、和生产力提升的关键要素。VAST的创始团队拥有深厚的商汤背景创始人兼CEO宋亚宸和CTO梁鼎都在AI领域有着丰富的经验。 自成立以来VAST动作频频。年初VAST亮相了首个3D大模型Tripo 1.0而仅仅几个月后他们又与Stability AI合作推出了TripoSR进一步提升了生成速度和质量。现在Tripo 2.0已经上线并可在线使用凭借3D Scaling Law带来的效能提升Tripo更新周期仅9个月。 △3D建模经典之「牛油果扶手椅」Tripo 1.0生成
今年3月初VAST又联合Stable Diffusion背后的Stability AI共同推出了开源的3D基础模型TripoSR。
因其能够达成“0.5秒完成单图生成3D模型”的成就在3D生成领域的开源届广受欢迎至今GitHub上揽星4.3k。 现在Tripo 2.0又问世了已经在线可玩。
得益于3D Scaling Law带来的效果提升Tripo的这三次更新时间跨度仅仅有9个月。
而且有速度也有质量效果在业内外颇受认可。
拿一则新消息来佐证一下不久前世界最大在线游戏开发平台Roblox官宣入局AI 3D生成但截至目前Tripo都是Roblox玩家最风靡的3D建模的趁手工具。 VAST未来将持续推动3D生成式AI的技术边界不断探索3D Scaling Law的研究模型并进一步提升3D生成模型的质量和扩展能力。我们期待3D生成领域迎来自己的“ChatGPT时刻”。
随着3D生成技术的快速发展AI在这条赛道上展现了巨大潜力。未来随着更多技术突破3D生成或将成为AI领域的下一个焦点。
ChatGPT-4o需要请关注并私信我哦
