发布Windows应用程序!试试英伟达“神笔马良”GauGAN

机器学习与生成对抗网络

共 1838字,需浏览 4分钟

 ·

2021-07-04 01:51

点击上方机器学习与生成对抗网络”,关注星标

获取有趣、好玩的前沿干货!


丰色 发自 凹非寺 量子位 报道 | 公众号 QbitAI

大家还记得致敬印象派大师高更的GauGAN吗?

只需简单画几笔,就能生成逼真风景画的那个:

这个能让普通人秒变“神笔马良”的神器,现在又发布Windows版公测程序啦!

长这样:

这次它提供了PSD文件保存格式等功能,界面也是看着此前的网页版友好非常多:

 网页版仍然可用

虽然但是……新的桌面版只能支持英伟达RTX系列的GPU了!

 老黄刀法,不得不感叹

有RTX系列的朋友可以往下看了。

如何使用?

下载安装包之前确保你的电脑符合以下具体要求:

操作系统:Windows 10
GPU:GeForce RTX, NVIDIA RTX, Quadro RTX, TITAN RTX
显卡驱动:460.89或更高版本

众所周知,它与其他画画工具最大的区别就是:让创作者用材料而不是颜色来作画

目前程序一共提供了15种不同的材料,包括天空、山脉、河流石头等:

并提供9种风格, 用来修改作品的整体滤镜:

这和老版没啥区别。

笔刷、直线、油漆桶、取色器等可以调节粗细的工具都有,就不说了。

和PS很像,笔画会按不同材料被分别存成一个个图层,而桌面版这次帮你显示出来了。

另外,它是实时渲染,左边画着右边就出结果,不像网页版还需要左等右等。

并且无论你在哪边画,两边都可以交互式更新(这个功能也可关闭)

最后,除了PNG格式,桌面版还可导出PSD文件。

并且左边(segmentation map)的图像也可以保存(虽然小编想不到这个存了有啥用,为了下次导入接着画吗)

而存成PSD格式的话,最终输出图像会被存为背景图层,接着就可以拿到PS上继续创作、或者与其他艺术作品结合了。

ps.也可导入从该程序导出的PSD文件。

下面是更多作品示例:

背后的技术

英伟达去年三月首次公布了这个工具背后的技术GauGAN,这一路又是上线网页版和又是开发桌面端,不得不令人想象它的应用前景。
wangGauGAN这个模型也是将语义分割图转化为逼真图像,它最大的创新点是提出了空间适应标准化 (SPADE)

SPADE算法作用在生成器中,它会接收上一层的输出和语义图作为输入,而上一层的输出经过BN,语义图经过resize后通过一个卷积层,然后再将它通过两个卷积层后生成的结果分别和BN的做wise乘法和加法得到输出图像。

这种处理方式能够有效地弥补BN带来的语义信息的丢失,使得生成的图像能够更加逼真。

 pix2pixHD算法与SPADE效果对比

这样语义信号就可以作用于所有层的输出,然后再进行一下上采样调整就可以交给判别器了。

另外,为了让最终输出更加逼真,该模型在NVIDIA DGX系统上使用了超过500万张图像进行训练。

最后,有条件有兴趣的朋友可以脑洞大开,戳下方链接去尝试。

也不知道这认真的桌面版一出,会不会有人做出令人惊喜的应用来呢。

下载地址:https://www.nvidia.com/en-us/studio/canvas/

注意:要有英伟达RTX的GPU支持哦!!!


猜您喜欢:


等你着陆!【GAN生成对抗网络】知识星球!  

CVPR 2021 | GAN的说话人驱动、3D人脸论文汇总

CVPR 2021 | 图像转换 今如何?几篇GAN论文

【CVPR 2021】通过GAN提升人脸识别的遗留难题

CVPR 2021生成对抗网络GAN部分论文汇总

经典GAN不得不读:StyleGAN

最新最全20篇!基于 StyleGAN 改进或应用相关论文

超100篇!CVPR 2020最全GAN论文梳理汇总!

附下载 | 《Python进阶》中文版

附下载 | 经典《Think Python》中文版

附下载 | 《Pytorch模型训练实用教程》

附下载 | 最新2020李沐《动手学深度学习》

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 | 超100篇!CVPR 2020最全GAN论文梳理汇总!

附下载 |《计算机视觉中的数学方法》分享

浏览 40
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报