英伟达新发的作图软件,让随手涂鸦变成以假乱真摄影大片!

null

不知道差友们有没有发现,不知不觉中,AI 和深度学习已成为绘图软件不可或缺的一部分了。小辣椒之前就给大家介绍过不少 AI 绘画软件。

它们效果五花八门,有的画风清奇,有的还真像那么一回事儿。。。

比如通过算法,让 JPG 秒变 GIF 的Photo Wake - up 

null

让 Ta “ 脱下衣服 ” 的人像编辑器SC-FEGAN

null

让朱茵和杨幂换脸的技术

null

等等等等。。。

一直潜心研发 “ 核弹 ” 的英伟达,也经常利用 AI 和深度学习,开发天马行空又实用的新绘图软件。

null

最近他们又脑洞大开,出了个逆天的 AI Photorealistic 实景绘图软件 —— GauGAN。

让人在鼠标点击拖拽之间,轻松实现星辰变幻、山河变迁。

只要画个大色块抽象画,就还你一片壮丽风景。

null

它操作简单易懂,左手边工具栏只有三样东西:油漆桶、钢笔画笔和铅笔画笔。

而屏幕底部则摆满了一系列常见物体,包括云朵、草地、植物、海洋等等。。。

null

右上角还隐藏摇一摇功能,想要白天黑夜,艳阳雪天,摇一摇都给你实现。

来看下巨简单的作画过程。

随手画个椭圆,用油漆桶将它填满,轻点 “ Rock ”,立马给你岩石的体验。

null

同样一个椭圆,如果你选择的是 “ Cloud ”,则会有片软绵绵的云朵浮现在眼前。

这确定不是灰姑娘里仙女的魔法棒吗?

null

而本需要数千年数万年才能实现的 “沧海变桑田”,GauGAN 也能一秒搞定。

比如你对长满树的山景不是很满意,想给小山换个硬核点的外形,只需将 mountain( 山  )切换到 rock( 岩石 ),就能瞬间切换成悬崖峭壁。

null

光是岩石悬崖有点单调的话,就再加一笔竖线。轻点 water( 水 )立马再来个雄伟壮观的大瀑布。

null

只要一点想法,就能画出一个新世界。

GauGAN 运用的是一种叫做 “ Segmentation Map ” 的算法模型。它可以将不同色块与现实场景相互对应,分辨出哪里是天空,哪里是树,哪里是河流。。。

再通过 “ Neural Network( 神经网络 )”让 GauGAN 自主学习,判断出树木、河流、天空的不同纹理。

别小看 GauGAN , 他可是学习了 flickr 照片库里一百万张真实照片的学霸呢!

null

通过对比分析真实风景图,他不仅了解了千万种物体的形态,还学习真实世界里物体间的关系,万物规律。比如季节对植物的影响,又比如湖水的反射效果。

所以,当你选择冬天,GauGAN 会让树失去叶子。 当草皮变成湖面,树木山峰就会倒映在水中。

null

而当一片草皮成了雪地,由于雪地反射光线,它还懂改变天空的颜色。

之前说的摇一摇功能就有类似的效果。晴空万里的雪天、天黑天亮,摇摇乐给你随机呈现。

null

目前,这个软件还存在许多不足,比如在测试版中,在两物体相连处会出现明显的界线,整体画面还略显生硬,NVIDIA 工程师正在努力修补这些缺陷。

相信在不远的将来,最终优化版本指不定可以大大提高建筑、景观设计、游戏开发的效率!

null

它在虚拟人工智能领域也有实用价值,像是机器人训练、自动驾驶发展等的,也都能派上用场。。。

参考资料:

https://techcrunch.com/2019/03/18/nvidia-ai-turns-sketches-into-photorealistic-landscapes-in-seconds/

“ GauGAN 正式版啥时候才上线啊!?

null