用 AI “唤醒” 老照片 | Mixlab 技术前沿

Mix Lab味知实验室

共 975字,需浏览 2分钟

 · 2021-03-21



#AI 滤镜#、#First Order Motion#




图灵动了起来!

图片使用的是家谱网站 MyHeritage 推出的AI工具:让老照片中人物 “活” 起来,主要技术是动作迁移。


动作迁移 


动作迁移是指将一个人物的动作信息迁移到另一个人物身上,实现动作的整体迁移。可以将之应用于肢体动作变换、人脸表情迁移等等。目前使用比较多的模型是 First Order Motion 。


典型的应用:给定一个人跳舞的原始视频,模型可以在目标对象执行标准动作后生成新的舞蹈视频。



使用在肢体动作上


使用在人脸上


仅仅只是动起来,似乎还不够:


老照片

修复后照片


“照片时光机”
—— 穿越回 100 年前

自微博:大谷

技术实现过程

AI 清晰度增强、AI 色彩还原、脸部精修、手绘微调等。(参考自:B站 大谷)

首先,用超分辨率,让照片清晰。


然后使用动作迁移,把另一个视频中人物的表情动作迁移给目标照片。最后再针对不完善的地方进行手绘的精修。



代码体验:
效果看完了,我们真实体验下动作迁移 First Order Motion 模型:

python -u first-order-demo.py  --driving_video input/test.mp4  --source_image input/1-4.png  --relative --adapt_scale

输入是一张目标图片和用来迁移动作的表情视频漫长的等待之后:


实验结果 ↓

1


2


3


猜猜哪位是 Mixlab 的工作人员??
留言有奖!


*
AI修复老照片结合之下的产品,在潜在用途上的危险性备受争论,只是目前大家的关注度更多在技术本身带来的娱乐性和试验性。


- END - 


欢迎大家加群告诉我们,你喜欢和关注的主题
只要关注人数足够多,Mixlab 随时为大家特邀发起 『 专场主题讨论』!(编辑:春FANG)


一个人的探索有些孤单,
一群人的探索会更有意思。

  扫码加入 vip 社群
进行跨界交流

浏览 18
点赞
评论
收藏
分享

手机扫一扫分享

举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

举报