来源:iflscience
编辑:三石
【新智元导读】与世界名画同框的梦想终于可以实现了,并且毫无违和感!康奈尔大学AI研究团队于今年4月发表的一篇论文,可以将物体和人完美的嵌入到画作中,而现在,这个技术的代码开源了!大家快来尝尝鲜!
如果你一直梦想着在《最后的晚餐》中和耶稣同框,或者融入进《尖叫》的情境里,那么恭喜你,现在,梦想可以轻易的实现了!
并且毫无PS痕迹!
今年4月,康奈尔大学(Cornell University)的一个人工智能研究团队发表了在arXiv上发表了一篇论文,详细地介绍了他们的新机器学习算法,该算法可以将物体和人完美(或近乎完美)地嵌入画作中,且与艺术家的风格完全匹配。
论文地址:https://arxiv.org/abs/1804.03189
现在,研究人员已经将代码开源至GitHub上,大家都可以去使用呦!
https://github.com/luanfujun/deep-painterly-harmonization
正如下图一样,将蒙娜丽莎替换成迪克特·康伯巴奇(Benedict Cumberbatch)的脸,也不会觉得违和。
迪克特·康伯巴奇的脸与达·芬奇的绘画风格完美地融合在了一起。
该团队的算法简单来说主要分为三个步骤:
- Step 1:首先粗略地将人脸或物体放在画上,这个阶段所呈现的效果就仿佛让你的爷爷在没有任何指导的情况下使用photoshop一样。
- Step 2:在下一个阶段,它会对绘画进行粗略的风格匹配,让它们看起来还像那么回事。
- Step 3:最后一个阶段中,进一步协调导入的对象,使纹理和样式与原始绘画相匹配,令其具有惊人的准确结果。
最后,艺术家似乎真的预言了轻型飞机的发明。
这也正是为什么下图中的战士仿佛拥有美国队长的盾牌了。
作者在他们的研究中写道:“绘画合成是一项艰巨的任务,因为合成的风格与原画并置,任何差异都能立即显现。”
由于风格和纹理的细微差别,观看者往往能够立即发现所添加的“新对象”。有些东西特别引人注目,尤其是当你把赝品和原作作比较时。
“相比之下,我们进行了一项用户研究,结果表明,我们算法生成的合成物往往被视为真迹,”作者写道。
开源一出,各种恶搞!
这下可把网友们给开心坏了,各种“恶搞”名画。
网友Gene Kogan将自己融入名画后,不禁感叹:“这是我见过最诡异的照片了!”
也有网友给梵高的肩上加了一只别致的小鸟。
各位看官是否也心动了呢?快去试试吧!
开源代码地址:
https://github.com/luanfujun/deep-painterly-harmonization
论文地址:
https://arxiv.org/abs/1804.03189