Adobe MAX | 铅笔画变卡通图、视频变漫画

机器学习与生成对抗网络

共 1994字,需浏览 4分钟

 ·

2021-11-09 10:16


点击上方机器学习与生成对抗网络”,关注星标

获取有趣、好玩的前沿干货!

来源 机器之心报道  编辑:陈萍

Adobe MAX 2021 呈现了一些不可思议的创新。

Adobe MAX 会议是 Adobe 的年度盛会,今年已于 10 月 26 日至 28 日采用纯线上直播的方式举办,今年的大会亮点之一就是 Sneaks 环节,该环节一般会展示其最前沿的研究项目。


今年的 Sneak 环节,Adobe 推出了一个最新的项目 Project Sunshine:能将 2D 铅笔画变成轮廓丰富的卡通渲染图,此外,你还能将渲染图像放大,如果需要,它大到可以贴在广告牌上。这就是 Adobe 最新项目 Project Sunshine 可以实现的功能。


借助 Project Sunshine,软件可以自动分析黑白草图,然后将其转换为矢量图,除此以外,Project Sunshine 还能自动为图像着色。


软件可以将草图涂成一个怪物——有角、牙齿和毛皮。它不只产生一种可能性,而是会产生数十种可供选择的选项。


这些生成的怪物不是依赖于随机着色或者特定的调色板。机器知道所有的动物牙齿都应该是相同的颜色,并且当用一种以上的颜色在像牛角这样的固体物体上着色时,这些颜色需要足够相似,使得牛角在视觉上不会产生不和谐的感觉。Adobe 使用了一种新颖的机器学习方法来构建 Project Sunshine。它没有使用典型的视觉 AI,而是基于自然语言处理 AI(语音助手会使用的那种 AI)构建而成。这意味着 Project Sunshine 可以标记和组织像角或牙齿这样的元素,就像自然语言中的单词一样,按数字进行绘制。

图像着色后,Project Sunshine 还允许用户使用简单的 dial 添加渲染,你可以在其中设置光源的角度,将平面 2D 绘图变成了更丰富的作品,效果类似于在漫画书和《辛普森一家》等动画节目中获得的感官。

这对于漫画书创作者来说,使用该功能可以做很多自动化的场景制作。对于图形设计师来说,Project Sunshine 可以通过这种更快的自动转换,节省很多时间。


Sneak 环节共享的第二个项目称为 Project Make It Pop。像 Project Sunshine 一样,它创建了一个矢量卡通。但是,这个项目可以从照片和视频开始,而不是从草图开始生成漫画。


滑板运动员的照片变成了一个简单的矢量卡通人物。但它并不止于此。Project Make It Pop 可以识别人物和物体,让你可以真正重新定位滑板运动员的手臂或腿。


如果你看到另一个滑板手,摆出更酷的姿势,假如你想让他出现在漫画中, 实际上你可以拍摄新照片,对其进行分析,角色可以完美地复制姿势。该技术不仅仅适用于摄影,实际上你还可以用卡通头像替换全动态视频中的人或事物。这可以说动画师的梦想成真。想象一下,在没有学习任何动画知识的情况下,就可以创作出优秀的动画内容。


截至目前,这些功能只是实验性的研究项目,能否被集成到 Photoshop 这样的工具还待定。但用户或许希望在 Photoshop 等工具中能实现这些功能,甚至是在像 Adobe Spark 这样已经面向具有较少图像处理技能的更广泛的受众的工具中。

参考链接:
https://www.fastcompany.com/90690233/exclusive-adobes-mind-blowing-ai-turns-napkin-sketches-into-cartoons


猜您喜欢:

等你着陆!【GAN生成对抗网络】知识星球!

CVPR 2021专题1:GAN的改进

CVPR 2021 | GAN的说话人驱动、3D人脸论文汇总

CVPR 2021 | 图像转换 今如何?几篇GAN论文

【CVPR 2021】通过GAN提升人脸识别的遗留难题

CVPR 2021生成对抗网络GAN部分论文汇总

经典GAN不得不读:StyleGAN

最新最全20篇!基于 StyleGAN 改进或应用相关论文

超100篇!CVPR 2020最全GAN论文梳理汇总!

附下载 | 《Python进阶》中文版

附下载 | 经典《Think Python》中文版

附下载 | 《Pytorch模型训练实用教程》

附下载 | 最新2020李沐《动手学深度学习》

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 | 超100篇!CVPR 2020最全GAN论文梳理汇总!

附下载 |《计算机视觉中的数学方法》分享

浏览 33
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报