发布Windows应用程序！试试英伟达“神笔马良”GauGAN
共 1838字，需浏览 4分钟
· 2021-07-04
点击上方“机器学习与生成对抗网络”，关注星标
获取有趣、好玩的前沿干货！
丰色 发自 凹非寺 量子位 报道 | 公众号 QbitAI
大家还记得致敬印象派大师高更的GauGAN吗？
只需简单画几笔，就能生成逼真风景画的那个：
这个能让普通人秒变“神笔马良”的神器，现在又发布Windows版公测程序啦！
长这样：
这次它提供了PSD文件保存格式等功能，界面也是看着此前的网页版友好非常多：
△ 网页版仍然可用
虽然但是……新的桌面版只能支持英伟达RTX系列的GPU了！
△ 老黄刀法，不得不感叹
有RTX系列的朋友可以往下看了。
如何使用？
下载安装包之前确保你的电脑符合以下具体要求：
操作系统：Windows 10
GPU：GeForce RTX, NVIDIA RTX, Quadro RTX, TITAN RTX
显卡驱动：460.89或更高版本
众所周知，它与其他画画工具最大的区别就是：让创作者用材料而不是颜色来作画。
目前程序一共提供了15种不同的材料，包括天空、山脉、河流石头等：
并提供9种风格， 用来修改作品的整体滤镜：
这和老版没啥区别。
笔刷、直线、油漆桶、取色器等可以调节粗细的工具都有，就不说了。
和PS很像，笔画会按不同材料被分别存成一个个图层，而桌面版这次帮你显示出来了。
另外，它是实时渲染，左边画着右边就出结果，不像网页版还需要左等右等。
并且无论你在哪边画，两边都可以交互式更新（这个功能也可关闭）。
最后，除了PNG格式，桌面版还可导出PSD文件。
并且左边(segmentation map)的图像也可以保存（虽然小编想不到这个存了有啥用，为了下次导入接着画吗）。
而存成PSD格式的话，最终输出图像会被存为背景图层，接着就可以拿到PS上继续创作、或者与其他艺术作品结合了。
ps.也可导入从该程序导出的PSD文件。
下面是更多作品示例：
背后的技术
英伟达去年三月首次公布了这个工具背后的技术GauGAN，这一路又是上线网页版和又是开发桌面端，不得不令人想象它的应用前景。
wangGauGAN这个模型也是将语义分割图转化为逼真图像，它最大的创新点是提出了空间适应标准化 （SPADE）。
SPADE算法作用在生成器中，它会接收上一层的输出和语义图作为输入，而上一层的输出经过BN，语义图经过resize后通过一个卷积层，然后再将它通过两个卷积层后生成的结果分别和BN的做wise乘法和加法得到输出图像。
这种处理方式能够有效地弥补BN带来的语义信息的丢失，使得生成的图像能够更加逼真。
△ pix2pixHD算法与SPADE效果对比
这样语义信号就可以作用于所有层的输出，然后再进行一下上采样调整就可以交给判别器了。
另外，为了让最终输出更加逼真，该模型在NVIDIA DGX系统上使用了超过500万张图像进行训练。
最后，有条件有兴趣的朋友可以脑洞大开，戳下方链接去尝试。
也不知道这认真的桌面版一出，会不会有人做出令人惊喜的应用来呢。
下载地址：https://www.nvidia.com/en-us/studio/canvas/
注意：要有英伟达RTX的GPU支持哦！！！
猜您喜欢：
CVPR 2021 | GAN的说话人驱动、3D人脸论文汇总
附下载 |《TensorFlow 2.0 深度学习算法实战》