生成式AI再创进步！Meshy-2为AI生成3D技术带来哪些创新？

any · 发布于 2024-2-27 11:35:23

此前引起大量关注的 AI 生成 3D 工具 Meshy 迎来了大更新，Meshy 的联合创始人兼 CEO 胡渊鸣发文解读了产品更新，并分享了他对 3D AIGC 发展方向的思考。
本文作者胡渊鸣，Meshy 联合创始人兼 CEO，计算机图形学知名学者，毕业于清华大学姚班，MIT 博士，也是「太极」（TaiChi）编程语言作者。
原文标题：《AI 生成 3D 模型发展到哪了？Meshy-2 带来哪些新功能？》

Meshy-1 的推出快三个月了。今天我们很开心地向大家介绍 Meshy 的新版本，Meshy-2。这是我们在 3D AIGC 文字生成 3D（Text to 3D）方面的最新进展。

Meshy-2 最主要的更新在于 Text to 3D，也就是从提示词直接生成 3D 模型。Meshy-2 的 Text to 3D 功能带来了在造型设计感、模型细节、贴图质量和风格方面控制的显著改进。相比 Meshy-1，Meshy-2 的模型比例更加自然、模型结构更精准，细节更丰富、清晰。

提示词：prehistoric winter boots with wool, realistic, 4K, high quality

提示词：royal armor set, gold, iron, highly detailed, medieval, knight armor, leather
Meshy-2 在文本到 3D 中提供了四种风格的选择：写实、卡通、低多边形和体素。我们希望这些选项能满足用户广泛的艺术风格偏好，并激发新的创意方向。

从左至右的风格分别是：低多边形、写实、体素、卡通
效率至关重要，我们设法在不影响质量的情况下提高了速度。Meshy-2 现在仅需 20 多秒就可获得预览，从输入提示词到细化结果，在 5 分钟内可端到端完成。（*运行时间为服务器低负载时测量，高峰期可能会有排队、减速。）我们在 Meshy-2 中引入了一个方便的网格转换系统，可以让用户一键实现减面、转四边面等常见操作。这可以一定程度上解决网格面数、AI 生成的模型拓扑不好（布线乱）的问题。

关于我们的用户比较期待的自动展 UV 方面的优化，这次没有更新。坦率地说，考虑到目前 AI 还不能按部件清晰地生成各种模块，更好的 UV 暂时在 AI 生成 3D 的管线中的价值还不太大。但是我们已经开始思考这个问题。Meshy-2 重点更新的内容就是上面这些了，主要是 Text to 3D。另外，不少用户已经融入到工作流程中的 Meshy Text to Texture 功能，我们也有小更新：速度更快、并且贴图细节丰富程度在同样的分辨率下更加清楚了。

Image to 3D 不是我们最近开发的重点，但是也有个小更新，优化了一些几何造型能力。

随着我们将重点从 Discord 转移到 Web App，Discord 社区将不再提供生成服务，转变为一个分享想法和经验的平台。这让我们能够更好地将有限的研发资源聚焦到 Web App 上，提供更完善的功能。欢迎加入我们的 Discord 和 WebApp 社区展示，探索和分享 AI 生成的 3D 艺术。

Meshy Web App 社区作品展示

Meshy-2 功能更新汇总
*Meshy-2 支持中文提示词和中文界面。如果你的系统语言是中文，Meshy-2 会自动显示中文页面。你也可以在左下角的 Settings -> Preference -> Language 中选择 “简体中文”。在提示词框中输入中文提示词会自动翻译。