AI自动生成3D模型平台概览
作者:微信文章随着人工智能技术的不断进步,AI三维建模工具应运而生,为创意工作者带来了新的机遇。这些工具利用深度学习算法和大数据分析,能够根据用户的简单输入(如文本描述、图像或草图)快速生成高质量的三维模型。这不仅极大地提高了创作效率,降低了学习成本,还为创意人员提供了更广阔的想象空间。
统计了目前市面上的一些自动生成3D模型的平台:
●Tripo: https://www.tripo3d.ai/
●Rodin: https://hyperhuman.deemos.com/rodin
●Meshy: https://www.meshy.ai/
●Luma AI - Genie: https://lumalabs.ai/genie
●sudoAI: https://www.sudo.ai/3dgen
●Unique3D: https://aiuni.ai/
●3D Hunyuan: https://3d.hunyuan.tencent.com/
●Vizcom: https://www.vizcom.ai/
●Monster Mash: https://monstermash.zone/
●Kaedim: https://www.kaedim3d.com/
●CSM: https://3d.csm.ai/
这里,我们主要讲一下比较常用的前三个,其他的大家也可以试试。
01 TRIPO
基本介绍
官网:https://www.tripo3d.ai/app
母公司:VAST
国家:中国
上线时间:2023年3月
目前最新版本:Tripo 2.0
VAST是一家致力于通用 3D 大模型研发的 AI 公司,公司目标是通过打造大众级别的 3D 内容创作工具,建立 3D 的 UGC 内容平台,让基于 3D 的空间成为用户体验、内容表达、提升新质生产力的关键要素。VAST连续完成了两轮共计数亿元的融资,天使轮由绿洲资本独家领投,Pre-A轮领投方为达晨财智以及春华创投,英诺天使基金、水木清华校友种子基金跟投,并创造了3D大模型赛道的最⼤融资⾦额。
登录与订阅
1.登录:邮箱验证/谷歌账号登录
2.积分:每月都会赠送600的试用积分
3.付费价格:专业版$19.9/月
如何生成3D
1.生成方式:
(1)文字生成3D:在文本框内输入想要模型的提示词即可。这里输入超级马里奥,后台就会搜索与其相关的已有模型。你也可以选择亦或是重新生成一个新的模型。
并且在这里还可以设置反向提示词和人物肢体参数,修改长度或高度,还能“A-pose”“T-pose”两个姿势随便选,这点非常方便。
(2)图片生成3D:单图、多图都能作为输入。
2.生成流程:
Tripo利用DiT和U-Net模型的复合架构,能够快速生成具有丰富细节和高质量材质的3D模型。先在几秒内生成形状几何预览,再接着几秒内为其“贴上皮肤”,⽣成纹理及PBR,为 3D 生成领域设立了通用模型新的效果标准。
(1)进入网站,在底部操作框中点击擅长图像,点击 Create 等待生成;
(2)检查生成的模型和贴图效果,如果不满意,可以点击底部的 Free Retry 功能重新生成;
点击右上角外扩按钮,进入全屏操作界面。生成好的3D模型还可以一键绑定骨骼、风格化;
点击右侧的骨骼绑定,还可以让它走起来;
(3)模型下载也十分方便,可以选择多种格式下载,还支持重拓扑。
02 RODIN
基本介绍
官网:https://hyperhuman.deemos.com/
母公司:影眸科技和上科大MARS实验室联合开发训练
国家:中国
上线时间:2024年3月
目前最新版本:Rodin Gen-1
Rodin主要针对国内三维资产生成模型核心算法缺失以及自动化三维设计需求,不仅能够生成符合CG流程标准的3D模型,还能生成PBR材质并进行高质量的渲染,从而实现从文本、图片等介质到三维模型的大规模快速高效重建。Rodin拥有15亿参数,性能上远超如meta等国际大厂的同期工作,上线几个月便已拥有数十万用户,而且大部分是海外用户。可以说,这是目前市面上唯一一个Production Ready的泛3D生成大模型。
登录与订阅
1.登录:谷歌账号/Github账号/邮箱登录
2.积分:新用户都会赠送5个积分
3.付费价格:专业版$15/月
如何生成3D
1.操作步骤:
(1)选择模型生成方式:
文本输入:输入描述性文本,例如“羊毛毡女孩”,平台将根据文本生成 3D 模型。
单图像:上传一张图片,平台将根据图片生成 3D 模型。
多视图融合:上传多张从不同角度拍摄的图片,平台将根据多张图片生成 3D 模型。
(2)Rodin更擅长角色,尤其是卡通类怪物,效果非常惊艳,在控制5000-10000面左右就能生成非常惊艳的效果。
生成效果不满意可以有十次重做的机会,等确认没问题了再消耗点数生成就行。
2. 生成模型:
点击“模型确认”按钮,平台将根据您选择的参数和输入生成3D模型。
3. 生成贴图:
这里Rodin提供了两个选项PBR贴图的丰富度和与参考图的相似度,可以选的值大一些,这样AI可以自由发挥生成贴图。
4. 下载模型:
导出的时候可以设置导出布线后的模型、LOD模型以及高面数模型,导出格式也可以有很多格式可选,最主要的是它可以直接生成我们经常用到的PBR贴图,甚至可以配合ZB继续深入细化。
03 Meshy
基本介绍
官网: https://www.meshy.ai/
母公司:Meshy
国家:中国
上线时间:2023 年 11 月
目前最新版本:Meshy 4
这款 3D AIGC 工具来自一家创业公司 Meshy 。公司联合创始人兼 CEO 胡渊鸣是计算机图形学知名学者,毕业于清华大学姚班,MIT 博士,也是「太极」(TaiChi)编程语言作者。截至目前,Meshy 已经更新到了第 4 代。从 2023 年 11 月登场,Meshy 就以快速、保真、操作简易走在行业前列。Meshy 3 在提升文生 3D 的真实感,以及图生 3D 模型的自然度与细腻度都往前迈了一步。
登录与订阅
1.登录:邮箱/谷歌账号/Discord账号
2.积分:每月都会赠送200的试用积分,如升级为Pro版本,可免费试用3天
3.付费价格:Pro版¥142/月
如何生成3D
Meshy的四种使用模式:
1.文字生成3D:一分钟内根据文字描述生成3D模型
2.图像生成3D:一分钟内将图像转换为3D模型
以一种更独特和专注的方式将「文本/图像到 3D」分割为两个步骤:建模和纹理。
建模阶段:在这个阶段,Meshy-4 根据文本/图片提示生成 4 个无纹理模型。这一阶段生成的网格干净且高度详细,为最终资产的生成提供了坚实的基础。
纹理阶段:建模阶段完成后,你可以选择一个生成的网格结果来继续生成纹理和风格(可选雕塑和PBR)。纹理是在之前版本的细化阶段直接生成的。最终生成结果在视觉上非常连贯。
然后可以绑定骨骼,让它动起来
下载可以有各种格式,会员还可以调整尺寸,支持的格式包括 .fbx、.obj、.usdz、.glb、.stl 和 .blend。
3.AI材质生成:可以使用文字提示词或者三视图来强化模型的精度,创建高质量纹理。
4.文本生成体素:AI会根据提示词生成体素风格的3D模型,类似于乐高或Minecraft中的立方体结构,适用于创造具有特定风格的作品。
如果想与社区或你的朋友分享你的作品,只需单击右侧工具栏上的“发布到社区”和“分享”按钮即可。从那里,可以将模型发布到Meshy社区,通过电子邮件或社交媒体共享,复制模型预览链接,或下载你的创作的视频预览。
团队还更新了「发现」页面,以配合 Meshy-4 的模型质量增强功能。更新之后,当你将鼠标悬停在 Meshy-4 生成的模型上时,你可以立即显示其无纹理版本。如此一来,你可以仔细检查模型的底层几何形状,看到 Meshy-4 改进算法提供的干净坚硬表面和复杂细节。
从这些3D生成的应用,可以延伸到「空间智能」的概念,这也是斯坦福大学教授李飞飞(Fei-Fei Li)所提倡的,「空间智能」即生成、推理和与三维世界互动的能力,最近正在引领 AI 发展方向。
他们的目标,简而言之,就是构建具有空间智能的大世界模型(LWM),让它可以感知、理解、推理,甚至生成3D世界,并能与其互动。她表示,「所有空间智能的生物所具备的行动能力,是与生俱来的。因为,它能够将感知与行动进行关联」。「如果想让AI超越其自身当前的能力,我们需要的是,不仅仅能够看到、会说话的AI,而是一个可以行动的AI」。
现在每个人都能用AI 3D的能力建自己的模型,生成一条赛博朋克的鱼,或者皮卡丘和钢铁侠的结合体,生成后再打印出来,就拥有自己独一无二的手办了——这是完成定制化的需求。于是,有很多首饰、手办、积木玩具的厂商,可以利用AI 3D快速生成自己想要的款式,然后放到市面上看大家的反馈。尤其最近要快要元宵节了,还能快速做一些定制化的toB礼盒。
展望未来,我们有理由相信,随着技术的不断进步和应用的不断拓展,3D + AI的能力将越来越被用户所接受和喜爱。他们的工作,进一步为我们描绘了一个充满无限可能的3D世界。
延伸阅读:
1.Tripo Tutorial: https://www.youtube.com/watch?v=PUjw_gzzmLI
2.Rodin Tutorial: https://www.youtube.com/watch?v=vjL4g8oYj7k
3.Meshy Tutorial:https://www.youtube.com/watch?v=3Zt0psEizMg
4.《50+ Meshy Keywords to Create Amazing 3D Models》:
https://www.meshy.ai/blog/50+-meshy-keywords-to-create-amazing-3d-models
5.Worldlabs:https://www.worldlabs.ai/blog
页:
[1]