posenet怎么玩?真人录制火柴人,骚气起来! | Mixlab 技术前沿

Mix Lab味知实验室

共 891字,需浏览 2分钟

 ·

2021-03-30 21:51



#PoseNet#、#动画简笔画#


一键生成骚气的火柴人

—— 真人录制


使用 Google 的 PoseNet 从摄像头图像计算您的姿势,并渲染简笔画,然后将其导出为动画gif,看起来是不是很简单!



摆一个帅气的POSE

然后得到:



除了录制火柴人,PoseNet还有哪些好玩的创意应用呢?



Mixlab 技术带读


量化拍照姿势
我们在网上可以看到大量优秀的摄影作品,如何利用机器从网上获取大量的图片,从中提取出最佳的摆拍姿势供拍照时参考?针对这个想法,我进行了若干的实验。


posenet易于使用,用tensorflowJS只需10行代码,即可实现人体关键点检测。
交互方式
用PoseNet在浏览器实现体感游戏,玩游戏当然是没问题啦~


疫情期间的旅行方式,谷歌街景创意玩法,全新体验来袭:



谷歌发布的一个AI游戏,名字叫Move Mirror ,生成魔幻动图。


虚拟偶像
Pose Animator基于骨骼的动画的思想,利用PoseNet和FaceMesh的识别结果,实时对其包含的曲线进行动画处理。有点虚拟偶像的感觉了。


更多尝试
如果只有一个人是不是太简单了,我们再增加一些好玩的~

利用webRTC,我们可以实时传输手机摄像头拍摄的视频到电脑上,多人使用的话,就是把多部摄像机的视频经过posenet处理后,合并到一起,达到多人同屏互动的目的。

目前通过design-ai-lab工具实验中,先是实现了多人视频的实时传输,演示下电脑摄像头+手机摄像头2路视频的实时传输后合并到一起。


*待续



- END - 



欢迎大家加群告诉我们,你喜欢和关注的主题

只要关注人数足够多,Mixlab 随时为大家特邀发起 『 专场主题讨论』!(编辑:春FANG)




一个人的探索有些孤单,

一群人的探索会更有意思。


  扫码加入vip社群

参与更多跨界交流


浏览 58
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报