英伟达新发的作图软件,让随手涂鸦变成以假乱真摄影大片!
不知道差友们有没有发现,不知不觉中,AI 和深度学习已成为绘图软件不可或缺的一部分了。小辣椒之前就给大家介绍过不少 AI 绘画软件。
它们效果五花八门,有的画风清奇,有的还真像那么一回事儿。。。
比如通过算法,让 JPG 秒变 GIF 的Photo Wake - up
让 Ta “ 脱下衣服 ” 的人像编辑器SC-FEGAN
等等等等。。。
一直潜心研发 “ 核弹 ” 的英伟达,也经常利用 AI 和深度学习,开发天马行空又实用的新绘图软件。
最近他们又脑洞大开,出了个逆天的 AI Photorealistic 实景绘图软件 —— GauGAN。
让人在鼠标点击拖拽之间,轻松实现星辰变幻、山河变迁。
只要画个大色块抽象画,就还你一片壮丽风景。
它操作简单易懂,左手边工具栏只有三样东西:油漆桶、钢笔画笔和铅笔画笔。
而屏幕底部则摆满了一系列常见物体,包括云朵、草地、植物、海洋等等。。。
右上角还隐藏摇一摇功能,想要白天黑夜,艳阳雪天,摇一摇都给你实现。
来看下巨简单的作画过程。
随手画个椭圆,用油漆桶将它填满,轻点 “ Rock ”,立马给你岩石的体验。
同样一个椭圆,如果你选择的是 “ Cloud ”,则会有片软绵绵的云朵浮现在眼前。
这确定不是灰姑娘里仙女的魔法棒吗?
而本需要数千年数万年才能实现的 “沧海变桑田”,GauGAN 也能一秒搞定。
比如你对长满树的山景不是很满意,想给小山换个硬核点的外形,只需将 mountain( 山 )切换到 rock( 岩石 ),就能瞬间切换成悬崖峭壁。
光是岩石悬崖有点单调的话,就再加一笔竖线。轻点 water( 水 )立马再来个雄伟壮观的大瀑布。
只要一点想法,就能画出一个新世界。
GauGAN 运用的是一种叫做 “ Segmentation Map ” 的算法模型。它可以将不同色块与现实场景相互对应,分辨出哪里是天空,哪里是树,哪里是河流。。。
再通过 “ Neural Network( 神经网络 )”让 GauGAN 自主学习,判断出树木、河流、天空的不同纹理。
别小看 GauGAN , 他可是学习了 flickr 照片库里一百万张真实照片的学霸呢!
通过对比分析真实风景图,他不仅了解了千万种物体的形态,还学习真实世界里物体间的关系,万物规律。比如季节对植物的影响,又比如湖水的反射效果。
所以,当你选择冬天,GauGAN 会让树失去叶子。 当草皮变成湖面,树木山峰就会倒映在水中。
而当一片草皮成了雪地,由于雪地反射光线,它还懂改变天空的颜色。
之前说的摇一摇功能就有类似的效果。晴空万里的雪天、天黑天亮,摇摇乐给你随机呈现。
目前,这个软件还存在许多不足,比如在测试版中,在两物体相连处会出现明显的界线,整体画面还略显生硬,NVIDIA 工程师正在努力修补这些缺陷。
相信在不远的将来,最终优化版本指不定可以大大提高建筑、景观设计、游戏开发的效率!
它在虚拟人工智能领域也有实用价值,像是机器人训练、自动驾驶发展等的,也都能派上用场。。。
参考资料:
“ GauGAN 正式版啥时候才上线啊!?”