今日,京东与新华网联合发布的《画年画写春联,AI送福拜年夜年》新春做事正式上线,无论正面还是侧脸,用户仅需上传一五官清晰的照片,京东人工智能技能则会剖析你的面部特性,并根据这些信息匹配年画、撰写春联,末了还会有AI小姐姐为你朗读春联。

这看似大略的游戏中,实则展现了京东在AI领域的强大能力。
本次策划分别运用了人工智能领域打算机视觉CV、自然措辞处理NLP、语音合成TTS三方面的前辈技能,而这些技能不仅让用户在京东的消费更便捷顺畅、做事感想熏染更知心,更已经开放给全行业,让互助伙伴一起分享技能创新的代价。

京东AI强力技能支撑

差异于同类面部合成产品须要用户正面照,本次京东AI画年画的项目只需用户上传一张五官清晰的照片,对角度没有任何哀求。
这则依赖了京东AI背后强大的算法。

AI画年画写春联 京东开放零售背后的黑科技

人脸关键点算法大体上可以归类划为形状回归法、heatmap回归法和三维人脸重修法。
三类方法各有利害。
京东则采取了CNN+坐标回归的方法,能够较好的知足实时性和准确性的哀求。
首先经由人脸检测得到的人脸图像,随后输出是106个关键点坐标。

在经由大量演习后,京东面部识别算法可以识别不同角度的面部特色,与其他扣脸面部图像合身分歧,京东与新华网推出的新春策划对用户上传照片的角度宽容性更高,正脸侧脸均可识别。
而本次的年画天生也并非采取了大略的图像领悟,而是把人脸数据化,形成每个人都有的一组面部特色数据,随后匹配传统年画娃娃。

AI写春联属于内容天生范畴,它是相对付感知智能和认知智能更高等的创作智能,京东AI在这一前沿领域做了大量的前沿研究和探索。
其基本技能事理是基于海量挖掘的春联库,演习序列到序列的深度学习模型。
同时,京东对传统的序列模型做了深度定制和改造,增加了额外的主题编码器,从而实现了对天生春联的“福禄寿喜财”五个主题的精确掌握。

在过去的一年,京东AI在内容天生领域做了大量的研究探索,紧张集中在研究受控条件下的内容天生技能,包括增强内容天生的多样性,天生指定主题、指定情绪、指定风格的文本,以及增强长文天生的逻辑同等性。

多项AI能力对外开放

本次新春策划背后的多项技能,目前已在京东多个实际业务场景中落地。
京东AI人脸属性识别,用于线下的广告精准投放,实时剖析受众群体的人脸属性,并据此投放精准匹配的广告信息。
线上互动娱乐营销,如脸缘测试,颜值比拼,笑脸值抽奖等。
紧张运用于多人脸实时属性互动显示屏。

此外,京东AI利用自身的算法上风,打造针对零售场景下的智能摄像头,对入店用户进行剖析,通过人脸去重为商家供应更加精准的客流统计,同时基于人脸的属性剖析,在“数”的根本上,供应了“质”的剖析。

而在自然措辞理解领域中,内容创作在包括商品描述自动天生、个性化礼品定制、以及对话天生等运用。
个中个性化礼品定制自2018年10月上线以来已为顾客累计天生超过150万首诗歌贺卡(圣诞节单天生成5.8万首),成为商业化写诗的一个范例成功案例,同时也为业界探索内容天生技能的商业化和落地供应有效参考。

此外,京东AI在语音合成的技能上率先达到商用状态,现已在京东的商城客服语音机器人,京东语音外呼机器人,京东阅读上已落地。

京东强大的AI能力也频频得到业界认可。
在2018 ECCV大会举办了视觉领域迁移学习寻衅赛中,京东AI研究院分别以大比分得到了开放式图像分类(openset classification)和物体检测(detection)的桂冠;在CVPR 2018 “Look Into Person” 国际竞赛中,京东AI研究院打算机视觉与多媒体实验室荣获单人和多大家体姿态估计两个竞赛单元的冠军,以及单大家体姿态解析竞赛单元的亚军。
而京东神经网络端到端语音合成技能,更被MOS 4.3的打分领先全行业。

除了运用于京东自身业务上以外,目前京东还将诸多能力开放给行业互助伙伴,通过京东NeuHub平台全面开放,同时,吸引精良的人工智能家当链互助伙伴,共同打造的面向市场的人工智能开放平台。
目前NeuHub平台拥有28个自研API,4个垂直办理方案,4个端到真个AI创新产品,内部提升京东整体运营效率、外部赋能零售干系行业。

技能引领发展 给消费者供应更优质做事

2018年无疑是京东技能创新大发展的一年,在AI、大数据、云打算、智能供应链、智能物流、智能营销、金融科技这些技能的驱动下,业务领域迸发出更强劲的动力,也帮助了京东很多互助伙伴创造经营奇迹。
其背后,是京东拥有的电商领域最长的家当链条,明确的运用处景实现技能落地。

随着科技发展,互联网走过了移动互联网时期,主场从PC端转移到移动设备上,互联网代价升级至新阶段,直接给行业商业模式带来巨大转变。
用户的生活办法也与以往产生较大改变,京东在这一期间抓准机遇迅速崛起、壮大,前面十几年的业务场景、技能能力积累,给现在技能转型奠定了坚实的根本。

京东已从原来的技能支持业务发展为技能引领业务,更进一步对外开放做事,成为行业发展的动力引擎。
这次AI技能在春节的惊艳亮相是一个缩影,京东希望在行业中打造‘盟国’生态,积极将自身的技能和资源积木化,开放给行业,和互助伙伴的优质“积木”拼接,创造更大的代价,并给消费者带来更好的生活体验。