量子位 | "大众年夜众号 QbitAI

把稳看,这是一家“邪术博物馆”,陈设的展品琳琅满目,乃至还有机甲套装……

邪术镜子、水晶法杖……也是一应俱全,仿佛真的进入了邪术天下。

没错,这个“博物馆”里的“展品”全都是由AI打造的,而且一件只须要五分钟。

AI打造魔法博物馆五分钟完成一件3D展品

来自南洋理工大学、上海AI实验室等机构的研究职员,共同推出了新款文生3D根本模型3DTopia。

只须要一组文本,它就可以在5分钟内天生出多样化、高精度的3D模型。

除了“邪术博物馆”里的展品之外,日常的物品3DTopia更是可以精准合成。

比如老板心血来潮想要支配一下办公室,它就能建立出桌椅摆件的样子,乃至桌子上的咖啡也一起“准备”好了。

就算天马行空一些也没紧要,只要人能想到,它可以建立出一套月球的“沙盘”。

那么,该怎么用3DTopia来创建3D模型呢?

推理分两阶段进行

3DTopia的推理过程是分为两个阶段进行的,第一个阶段会根据提示词天生点云格式的粗糙模型。

比如当我们让它天生一个机器人模型时,第一阶段得到的模型是长这样的:

第二阶段便是用该团队推出的theeefiner对这个粗糙的点云进行细化,并完成上色等操作。

经由优化theeefiner的之后,这个机器人模型终于变成了人类熟习的样子。

以是,实际操作过程也须要对这两部分用到的工具分别进行支配。

首先拉取3DTopia的文件,然后用conda创建虚拟环境并完成安装,接着还要安装另一份教程支配第二阶段要用到的threefiner。

支配完成之后,还得到HuggingFace高下载一个checkpoint文件并放到指定目录。

全体过程难度倒也不算大,但是对付小白来说操作起来可能也得费一番功夫。

以是,如果这个支配过程看上去过于繁琐,这里还有一份大神改编的Colab条记。

利用这份条记,只须要修正个中的提示词和文件名,支配过程则是一键完成,不过实测须要选择A100才能完美运行。

这份条记将第二阶段拆分成了两个子步骤,以是支配完之后一共须要运行三段代码,修正提示词的办法如下图。

个中stage1天生的文件名可以点击左侧的文件夹图标,就可以在3DTopia - results目录下找到,stage1目录下同时还会天生初稿的预览视频。

终极的成品模型,则是默认存在了stage2目录中。

不过须要把稳的是,目前条记的第2-2步存在一处小缺点,运行之前须要在threefiner前加上一个英文感叹号,否则无法正常运行。

GitHub:https://github.com/3DTopia/3DTopiaColab条记:https://colab.research.google.com/github/camenduru/3DTopia-jupyter/blob/main/3DTopia_jupyter.ipynb

— 完 —

量子位 QbitAI · 头条号签约

关注我们,第一韶光获知前沿科技动态