用「长颈鹿」组成的「鸡」是什么鬼...长颈鸡吗?

你或许以为这种并不存在的事物过于荒诞,而且靠自身的想象力有点难以描述,但最近,

有AI能把这些东西画出来了。

例如当你给出设定,用「大象」构成的「鸡」,一样平常人还在愁鸡头该当安排在哪,这款最新的AI已经画完了,而且一口气画了几十张:

用企鹅做出的炸鸡什么样这个AI毕加索的谜底把我逗笑了

情不自禁的想来一个「看懂,掌声」。

没错,OpenAI又整活了,本日要先容的这位AI界的新晋毕加索正是他们最近演习出的图像天生器,DALL·E。

关于会画画的AI,狂丸之前没少先容过,但DALL·E有点特殊,在一定的框架下,它能按照人类的笔墨描述,给出画面图像,无论这段描述有多不着调。

如果让你画一幅「一个小白菜宝宝穿着芭蕾舞裙遛狗」,你可能会一脸懵,但DALL·E直接就整出来了:

主角换成皮卡丘也没问题,而且每只狗子都不一样:

以是,这看起来便是一个可以利用文本描述天生图像的AI。
人类的指令便是像是完成填空题,有一些可选选项,模式类似:绘制一个「xxx」的「xxx」,比如下图中,选取了「绿色」,得到了绿色的表。

(绿色,六边形,钟表)

于是,不同的关键词就组成了千奇百怪的东西,虽然看着有一丝丝沙雕,但实在这款AI在制图方面有着比较全面的功能。

DALL·E都能「画」些什么?

比较根本的便是「掌握属性」。
我们刚才先容过,例如「立方体」的「老虎」,通过两个大略的关键词构成的一组词汇,然后天生画面:

「环面」的「水」,很有美感:

还可以「绘制多个工具」,包括他们的空间关系,像是下图:

一个「小」的「赤色」的方块,「立」在一个大的「绿色」方块上。

此时AI不仅要将词组精确组合,而且要形成精确的关联,避免稠浊。
下图是「一只绿色的大象坐在一只赤色老鼠身上」,可以感想熏染一下AI的抽象画法:

其余还可以根据「画面的视角」天生图片。

如「美洲狮」「坐在山上」的「鸟瞰图」,当然也可以选择平视或者特写等多个视角选项:

根据「画面风格」变动天生图片,「狐狸」「坐在森林里」的「3D渲染图」:

类似的关键词,还可以换成前几年比较火的低多边形风格,也可以改成像素风格:

还可以天生「横截面图」,这西瓜让AI切的稀碎:

其他的功能还有很多,例如「推理背景细节」,给出一个大概的方向让AI补充画面。

像是「清晨,一只水豚坐在森林里的画」,AI会根据关键词,推断光芒一类的需求,然后天生不同风格的「画」这个结果,看效果确实艺术极了:

而我最喜好的是「合并不干系的观点」。

常日来说,我们组合一个词汇都是用于描述真实存在的事物,例如木质的桌子。
不过好玩的是,DALL·E可以将不同观点的工具「强行」缝合,创造出新的东西,举个例子,设置由「蜗牛」组成的「汉堡」,于是就涌现了汉堡蜗牛:

觉得类似的天生办法,很适宜做设计。
下图的关键词是,一个「冰川」「形式」的「茶壶」:

更进一步还可以制作「脑洞插画」,「皮卡丘」「穿着西装」「擤鼻涕」:

「动物与动物之间的嵌合体」,用「长颈鹿」组成的「鸡」:

还有神话中的不太好想象的「猫龙」,在AI眼里,竟然是长成这样的:

DALL-E,是什么?

如果你对去年的GPT-3有印象,就能更大略的理解DALL·E。
对,GPT-3便是那个给一些词或者句子,就能够自己写文章的那个AI。

这次的DALL·E也是类似的功能,只不过变成给笔墨天生图片了。

实在质跟GPT-3一样,还是变压器措辞模型。
在GPT-3那里,变压器是从「笔墨到笔墨」,这个DALL·E则更进一步,变成了「笔墨到图片」。

是不是很神奇?那么,这个AI又是如何做到的呢?

根据DALL·E创造者OpenAI的先容,实现这个DALL·E,有两个关键的核心。

第一个,是吸收数据流进行演习。
DALL·E会吸收图像和笔墨所组合的数据流,在模型演习之前,须要对数据进行预处理,一次接管后,会用到1280个标记,个中256个用于标记文本,1024个用于标记图像。

之后,便是对这些数据进行自回归建模,这时候,DALL·E利用了一种名为「自把稳力层」以及个中的「把稳遮罩」。

怎么理解这个观点呢?大家可以回忆一下,平时你在聚精会神地不雅观察某个东西的时候,是不是会忽略周围的东西,这时候,你的把稳力都集中在那个事物上?

是的,在AI上,也有类似的观点:把稳力机制。
大略来说,便是用算法,让AI可以在不同外界须要下去选择性地不雅观察,找出最有用的点。
不同的算法得出的不同结果,就类似于咱们对同一事物的不同聚焦点,正如诗云「横算作岭侧成峰」。

而在「自把稳力」上,实在与把稳力,只差了一个字,它是后者的一种变体。
二者的差异,便是「自把稳力」减少了对外部信息的依赖,在原来就具有的「把稳力」剖析上,更侧重于剖析数据流内部各标记的干系性。

在这个DALL·E中,这样的不同把稳力「遮罩」,一共有着64个。

正是有了足够多关注和剖析的角度,担保了演习中同一输入中的每个图像标记,都能或强或弱地与笔墨标记产生关联。

其次,DALL·E还有其余一个核心:看看自己画得好不好。

你让他画画,他实在会先画出512幅画,不过嘛,AI在给你输出结果前,还会自己推敲推敲。

这个利用的便是CLIP网络,这是一个评价系统,它会对自己的作品进行评分,然后根据高低顺序排列,排名靠前的,才会输出给你。

DALL·E画出的沙雕作品

理解完来龙去脉,接下来便是整活韶光了。

只管DALL·E推给你的作品都是精挑细选的,但依然有很多鬼畜他妈给鬼畜开门——鬼畜到家的作品。

例如「地球的横截面」,有的像是Minecraft里的方块,有的像是切了一块火腿。

美洲狮在森林里的黏土动画,狮子看完想离开森林:

我这一辈子已经坐过数千次马桶,但「粉色」、「六边形」马桶还是第一次瞥见:

同时这样的马桶,它一秒就画了一堆。

(共30个,以上为节选)

我们都没有见过「环形」的「西瓜」,但DALL·E给出的答案彷佛也有点道理:

而这个「四面体」的「斑马」彻底给我笑吐了。

大自然看完,直呼行家。

还有用长颈鹿构成的乌贼:

下图分别是用熊猫构成的鳄鱼、羊驼、企鹅、鲸、乌贼,哪个最可爱?

用企鹅构成的黄瓜:

由企鹅构成的炸鸡...那这到底算是炸鸡还是炸企鹅?

不过无论是哪一种,都挺萌,而且看起来彷佛也挺好吃的。

末了推举一波DALL·E绘制的最匪夷所思的画作,「企鹅与肉饼」。
真正的——

「笑去世,企鹅肉」。

(文中图片素材来源自网络,仅供学习互换利用)