字节投资首位情感连接的数字人?数字人构建方法和元宇宙身份系统

Mix Lab味知实验室

共 4693字,需浏览 10分钟

 ·

2022-01-12 22:27


无限·虎·窗花



shadow

iBrand Talk 是孵化自 iBrand Up x Mixlab 的跨界话题精选专栏。本专栏将持续为大家进行Mix方向有趣、有料的话题精选。

本期精选了#数字人的话题和大家分享~~

杜韦柯


iBrand Talk 

专栏作者:杜韦柯 - iBrand编辑助理 - 爱好探索设计交叉学科的一切可能。

元宇宙专题|数字人  - 第 15 期



自从 “元宇宙” 概念火起来后,社会各界对其评价总是正负参半,热度逐渐消退后,甚至负面评价有层起不穷之势。

通常,噱头消退后换个风口后会再次兴起,但每个热点风口下引发的思考,乃至于创新的理论方法与实践将会是长久保值的知识财富。

[ VR->元宇宙 ]
2014年Facebook花费20亿美金收购Oculus VR,被称为虚拟现实元年。2021年 3 月 11 日,元宇宙第一股 Roblox 正式在美国纽交所上市,这一年被称为元宇宙元年……

不管是VR还是元宇宙,都是在探索下一代的互联网形态。作为元宇宙话题,iBrand Talk 意在以拥抱更先进的技术发展可能与更广阔的情景应用视角结合,来丰富现有设计以及多学科思考模型与应用方法。

中国首位真正有情感连接的数字人?字节独家投资新一代虚拟酷Girl

---> 扩展阅读


一位名为李未可(未来可期之意)的数字人,目标是成为中国第一个真正有情感连接的AI数字人。不光有完美的外表,还要有和年轻人契合的有趣灵魂……


情感连接是怎么实现的?Siri+XR眼镜+数字人,通过类似于Siri的智能语音助手技术,加上数字人的完美外表,用户佩戴XR眼镜即可实现和李未可的交谈……



01 
 [ 让数字人 “活”  起来 

数字人构建的4个维度:数字为 “人”,需有形与有情, 也需故事与社交。更多请查阅#元宇宙·跨学科知识库



opus

元宇宙的数字人相较于 QQ 炫舞的皮肤换装,到底先进在哪里 ?

回答这个问题之前,可以先从信息交互形式的演变来切入。

杜韦柯


信息交互的信息量与信息形式演变,随电子信息技术的发展,信息量由少到多信息形式由简单到复杂。

移动通讯工具技术支撑下的文字 —— 图文 —— 视频 —— 直播,到VR、AR技术支撑下的虚拟影像交叉现实世界 —— 虚拟世界体验与社交游戏

现阶段数字人的信息交互定位,或许在大范围普世应用上可界定为影像直播与虚拟影像交叉现实世界之间,正向完全虚拟世界体验与虚拟社交等活动进阶。

技术实现可能的现实定位清晰后,我们再进一步拆解构成一个完整生动的数字人的各个要素,即

身体数据库、心智拟人微表情系统、
社交属性与人设 IP 故事


# 数字为 “人”,需有形与有情

- 构建维度:身体数据库
是数字人在虚拟环境中存在与运动的物理数据基础。负责让数字图形音频信息组建得 “看上去像” 一个人。

qq 炫舞等人物扮演与活动游戏,其数字人的定位也就限定在了 “看上去像” 以及 “能操作地动起来像一个人”。元宇宙中的数字人拥有着更广阔的活动范围与活动形式,所要求的功能范围与应用场景也随之扩大。

智能化是刚需,更富有人情味是技术发展的结果,而是否进阶为超写实拟人却要依情况而定。


VRoid studio捏二次元形象,更多请查阅#元宇宙·跨学科知识库



- 构建维度:心智拟人与微表情系统
是使数字人富有人情味的关键。数字人能识别用户的情绪以及情景氛围并以丰富的微表情进行交互反馈。更有 “人味” 的数字人拥有与用户更细节深入的交互可能,但过份的拟人化,或许会产生 “恐怖谷效应” 的用户负面情绪反馈。

复杂的数字人应用情景与多元化的用户对象,要求对数字人拟人态的程度与智能程度进行灵活调试。

迪士尼研发深度语义面部模型,让表情更丰富.更多请查阅#元宇宙·跨学科知识库




# 数字为 “人”,也需故事与社交

- 构建维度社交属性与IP属性
通过社交和IP化,让数字人超越“花瓶”的定位,达到进一步“拟人化”。

当数字人拥有丰富的形象系统与智能拟人态系统时,数字人仍在静态的活动范围中与用户交互。这种静态类似于关在笼子中的 “宠物” 或者 “商品”。要使数字人在元宇宙中与用户进行更灵活的社交性交流活动,则需要为数字人赋予一定的社交属性与IP属性数字人会根据社交情景进行服饰换装,为了吸引用户也会提前丰富数字人的人设故事背景,让用户对其数字身份内涵产生兴趣。


02
 [ 元宇宙身份系统,
跨越次元壁的元宇宙人 ] 

在元宇宙中进行活动的数字人需要一套元宇宙身份管理系统。这套系统就功能组成上,要求拥有捏脸开源系统、多元身份管理平台、跨平台接入插件智能程度社交身份与人物人设等细节部分的管理功能,更多请查阅#元宇宙·跨学科知识库。



元宇宙的 “人”,可分为虚拟游客、原住居民与 “数字人NPC”。


- 虚拟游客,
即不参与元宇宙系统与生态共建的 “观众” 与 “游玩者”,类比于网络直播中的观众角色。


- 原住民,即参与元宇宙系统与生态共建的建设者、投资者与创业者,类比于网络直播中的直播运营团队与管理团队角色。


- 数字人NPC,即元宇宙世界中为游客与原住民提供服务的非真实人类主意识的虚拟服务身份,类比于网络直播中的虚拟主播。但就其智能化程度仍可细分为完全智能化与部分人类操控智能化。



而无论是什么身份的 “人”,在元宇宙中进行活动都需要一套元宇宙身份管理系统。这套系统就功能组成上,要求拥有捏脸开源系统、多元身份管理平台、跨平台接入插件智能程度社交身份与人物人设等细节部分的管理功能。

元宇宙是多世界多平台相交融的整体运行模式。人物多元的形象身份需要进行系统的管理以及跨平台接入插件的支持。元宇宙的数字人,可以是人物形态、也可以是非人形态,这要求功能开放的 “捏脸” 形象创造系统;数字人接入虚拟直播间,抑或是创业公司的讨论、协同办公空间,需要做到身份的一致性或是身份切换,就需要跨平台接入插件的技术支持

SDK全称 Software Development Kit,广义上的 SDK 是为特定的软件包、软件框架、硬件平台、操作系统等建立应用程序时所使用的开发工具的集合,狭义上的 SDK 则是基于系统 SDK 进行开发包装的、新的、独立的、能够完成特定功能并返回相关数据的一组工具的集合。


华为集成SDK-插件开发框架-插件系统-图形计算服务,更多请查阅#元宇宙·跨学科知识库。



将应用情景进一步细化,在元宇宙或者普通电子设备的直播情景中,虚拟数字人需要时刻调控内容输出与智能化程度。什么时刻需要 “像” 一个人,什么时刻需要 “不像” 一个人,不同的内容输出变换不同的社会身份装扮,面对不同的用户群体更换填充数字人物的人设故事,乃至于什么时刻 “失控” 以营造噱头,都需要其运营团队进行细节调整与宏观掌控。

虚拟形象生产平台,更多请查阅#元宇宙·跨学科知识库。




[ 元宇宙·跨学科·知识库 ]




扫码添加小助手,获取优惠

同时可以加入社群参与深入讨论


备注:知识库




- 未完待续 -
下一期
数字人应用热点应用领域与
心智拟人模型应用方法



# 投票

复制链接

https://shimo.im/sheets/vvkYvXwjxRhyt9Rc/MODOC


# 上期链接

元宇宙人类进化论:生物进化 → 信息进化


# 参考内容整理自播客:
元宇宙跨学科实验·即兴畅聊
第一期 元宇宙 数字



头图由M.AI人机协作完成

浏览 22
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报