Luma AI发布Discord机器人Genie,将AI与3D内容结合,创新文本到3D生成
硅谷初创公司Luma AI一直专注于将AI技术与3D内容相结合,其最近的创新成果——一个名为Genie的Discord机器人,实现了从文本提示到3D内容的生成。这一突破性技术,预计将对游戏开发、虚拟制作和艺术创作等领域产生深远影响。
Genie机器人能根据用户输入的文本指令,约20秒内生成四个简单的3D模型。每个模型都附带有交互链接,用户可以查看或以glb格式下载为3D对象。另外,用户还可以选择对模型进行改进以获得更高的分辨率和更准确的结果,尽管这一过程需要约20分钟的时间。但这种强大的工具无疑为创作者们提供了更多的可能性。
Genie的长期应用前景尤其令人振奋。在游戏开发和虚拟制作领域,创建复杂的游戏世界和3D资产通常需要大量专业知识和时间。有了Genie,游戏开发人员可以轻松地将他们的想法转化为文本,然后由艺术家进行改进,这将极大地提高工作效率。
除了游戏开发,Luma AI还看到了Genie在虚拟制作工作室领域的巨大潜力。目前,Genie作为“研究预览”版本免费提供,公司计划在未来将其推出为付费服务,同时不断改进其基础模型。
随着生成式AI在文本和图像领域的广泛应用,3D和视频生成模型成为了研究实验室和公司竞相研究的下一个目标。像之前的Stable Diffusion、Midjourney或DALL-E3等2D图像模型一样,文本转3D模型正在对艺术家产生深远影响。自2021年以来,这类模型的开发一直在稳步推进,例如Google的Dream Fields和Dreamfusion、CLIP-Mesh、OpenAI的Point-E和Shap-E、Nvidia的Magic3D、腾讯的Dream3D或最近的3D Gaussian Splatting。
Luma AI的Genie可以在Discord上获取,相关链接可以在Luma AI的网站上找到。