热门文章
- 《2022东方卫视春晚》拥抱元宇宙,刷新...
- 跨越时空的浪漫,千年名景黄鹤楼新年...
- 澳网杀入元宇宙
- “元宇宙”里过大年,《迷你世界》在做一...
- 总投资2亿!国内首家“元宇宙”主题乐园...
- 虚拟人:元宇宙世界的敲门人
- “修勾夜店”蹦出元宇宙
- 麦当劳在元宇宙庆祝农历新年
- 元宇宙中的不平等
- 莱斯米尔斯正通过VR拳击游戏进入元宇...
- Soul发布《Z世代行为年度报告》展现元...
- 元宇宙“入侵”各大春晚,技术“破壁”打...
- 专访|一个95后诗人将300+诗人引入诗...
- 全球首位体育世界冠军虚拟分身诞生
- 80后的QQ秀,15后的元宇宙
- 虚拟人,能成为元宇宙的“船票”吗?
- 元宇宙也好、NFT也罢,反正B站无法免俗
- 观冬奥·向未来丨自由视角观赛技术助...
- 元宇宙电影:黑客帝国4之矩阵重启
- 元宇宙虚拟偶像资本押注、粉丝暴涨,是...
从5个方面,帮你了解什么是虚拟数字人?
大家好,我是 Clippp。今天为大家分享的是「虚拟数字人」。这段时间元宇宙概念的大火带动了很多人对未来的无限遐想,与元宇宙紧密相关的虚拟数字人的热度也在提升。
现在网络上经常出现各式各样的数字人,虚拟偶像、虚拟主播层出不穷,当然伴随着数字人一同出现的还有各种争议…
今天我们就来一起探究虚拟数字人是什么、具有哪些特征,分为哪几种类型以及都应用在什么行业,深入地了解虚拟数字人概念。
数字人的三方面特征
虚拟数字人是指具有数字化外形的虚拟人物。与具备实体的机器人不同,虚拟数字人依赖显示设备存在,我们所知的很多虚拟人都要通过手机、电脑或者智慧大屏等设备才能显示。
虚拟数字人应具备以下三方面特征:
一是拥有人的外观,具有特定的相貌、性别和性格等人物特征;
二是拥有人的行为,具有用语言、面部表情和肢体动作表达的能力;
三是拥有人的思想,具有识别外界环境、并能与人交流互动的能力。
综合来看,就是具备四方面的能力,即形象能力、感知能力、表达能力和娱乐互动能力。
如果我们下次再看到有公司推出数字人,就可以结合这些特征和能力来判断这个数字人的可信度,避免被借势营销的企业钻了空子。
数字人的运作原理
知道了什么是数字人,接下来就要搞清楚数字人到底是怎么说话、互动的,是背后有真人在操控,还是完全通过技术生成。
面对新兴的数字人,相信很多读者都存在类似的疑问。数字人的诞生发展和 AI 人工智能可以说是密不可分,想了解数字人的运作原理,首先要知道数字人的通用系统框架。
虚拟数字人系统一般情况下由人物形象、语音生成、动画生成、音视频合成显示、交互等 5 个模块构成。(资料参考: 2020 年虚拟数字人发展白皮书)
交互模块为扩展项,根据其有无,可将数字人分为交互型数字人和非交互型数字人。
首先看一下非交互型数字人:系统依据目标文本生成对应的人物语音及动画,并合成音视频呈现给用户。
交互型数字人根据驱动方式的不同可分为智能驱动型和真人驱动型。
智能驱动型数字人:通过智能系统自动读取并解析识别外界输入信息,根据解析结果决策数字人后续的输出文本,驱动人物模型生成相应的语音与动作来使数字人跟用户互动。
这种人物模型是预先通过 AI 技术训练得到,可通过文本驱动生成语音和对应动画,业内将此模型称为 TTSA(Text To Speech & Animation)人物模型。
真人驱动型数字人:真人根据视频监控系统传来的用户视频,与用户实时语音,同时通过动作捕捉采集系统将真人的表情、动作呈现在虚拟数字人形象上,从而与用户进行交互。
数字人常见的类型
调研分析当前市场上的数字人,根据人物图形维度,分为 2D 和 3D 两大类,从外形上可分为卡通、写实等风格,综合来看可分为二次元、3D 卡通、3D 高写实、真人形象四种类型。
接下来根据每种类型的特点,从外在形象、服饰装扮、表情动作等方面,结合典型案例来逐一分析虚拟数字人的设计。
1. 二次元类型
虚拟歌手-洛天依
洛天依的职业设定为虚拟歌姬,个性软萌可爱、温柔细腻,外貌特征上是灰发、绿瞳,头戴碧玉发饰。
除了独特的形象和性格,洛天依还能唱歌、跳舞、直播带货,多样的才艺加持让人物设定不单薄,受到很多用户的关注。
2. 3D 卡通类型
虚拟助理-度晓晓
度晓晓是基于虚拟人 IP 的陪伴型虚拟助理。在小度助手的能力基础上,度晓晓有虚拟人物形象和情感交互系统,具备视觉识别能力,支持自然的交流方式。
在外形装扮上,度晓晓是红色短发的甜美可爱风,五官比例偏向二次元风格。根据现有案例来看,度晓晓在眨眼、微笑等面部微动作以及肢体的造型,都很自然、生动,整体设计效果相对较好。
度晓晓定期更新身穿不同主题服装、摆着各种 pose 的形象,每套服装都有一个主题再带配上各种周边小配饰,营造出一种清新时尚的效果。
3. 3D 高写实类型
浦发银行数字员工-小浦
小浦作为银行的数字员工,主要进行风险评估、要闻播报、投资建议等在线服务。
从外观上,小浦在形象上无论发型还是五官都足够拟人化、职业化,穿着银行职业装,属于比较典型的银行职员形象。
小浦没有很夸张的面部表情,始终以面带微笑的状态面向用户,给人一种亲切感。肢体动作相对较少,没有特别夸张的动作设定,只有固定的几套动作。
虚拟偶像-AYAYI
AYAYI 是使用 Unreal 引擎造出来的特别拟真的 Metahuman 形象。
外在形象:写实程度更高,人物整体效果已经和真人十分接近,五官特别精致、眼睑微敛、银色短发,散发着一种清冷气质。
从 AYAYI 社交账号的更新来看,目前主要是分享一些 AYAYI 的摆拍图片,穿着的服装、饰品都比较真实、时尚,拍照环境都是休闲、艺术类的场景。
AYAYI 人物形象的时尚感和真实感,更容易切入商业化,比如穿着特定品牌的服装进行摆拍。
高保真数字人-Siren(塞壬)
Siren 是高保真、实时、可交互数字人,用到了实时渲染、表情捕捉、动作捕捉、高保真 3D 扫描等前沿技术,达到了目前业界最高的技术水平。
Siren 的面貌细节更加真实,可以很清楚看到皮肤的细节、眼睛的转动、说话的神态、脸上各种各样的细纹。不管是毛孔、细纹等皮肤质感,还是神态上的表情,都很像真人。
Siren 在说话时嘴唇动作自然,效果真实。
之所以有的数字人看起来不自然,很大一部分原因是因为数字人面部表情不生动,特别是在说话时嘴唇和脸部、牙齿甚至舌头的联动,很容易出现动作不联动、不真实的情况。
4. 真人形象类型
新华社 AI 合成主播-新小浩
“新小浩”是无论外在形象、面部表情、服装搭配、说话声音,还是肢体动作上,都是完全基于真实主持人生成。
通过语音合成、唇形合成、表情合成以及深度学习等技术,克隆出具备和真人主播一样播报能力的“AI 合成主播”。
我们每天都会遇见各种各样的人,即使脸上最细微的表情,我们都可以感知到,用计算机打造出来的表情,往往缺乏灵气。真人形象的虚拟主播的优势在于,他的特征都是来源于真人,呈现的面貌和状态更容易被用户了解。如果不仔细看,可能分辨不出是不是真人。
数字人的应用场景
目前国内市场上已经出现了非常多的虚拟数字人,在各行各业中有着广泛的应用。
虚拟数字人技术结合实际应用场景领域,切入各类行业,形成行业应用解决方案,赋能影视、传媒、游戏、金融、文旅等领域,根据需求为用户提供定制化服务。
按照应用场景或行业的不同,已经出现了娱乐型数字人,如虚拟偶像、歌手、网红、虚拟代言人等;
助手型数字人,如虚拟客服、虚拟导游、智能助手。
主播型数字人,如虚拟主播、虚拟支持人等。
这里搜集的案例只是虚拟数字人的应用的一小部分,还有很多优秀的应用案例等待着大家去一起发现。
代表性的研发平台
国内有很多互联网平台在研发虚拟数字人,我也从中收获了大量的信息和资料,这次把这些平台分享给大家:
搜狗AI开放平台:https://ai.sogou.com/
百度AI开放平台:https://ai.baidu.com/
NEXTStudios:https://www.nextstudios.com/
讯飞开放平台:https://www.xfyun.cn/
相关主题
-
虚拟数字人:元宇宙的主角破圈而来(附下载)
内容概要:虚拟数字人指存在于非物理世界中,由计算机手段创造及使用,并具有多重人类特征(外貌特征、人类表演能力、交互能力等)的综合产物。随元宇宙热潮,虚拟数字人作为先发场景产业备受关注。
-
京东云举办虚拟数字人专场沙龙 揭秘“元宇宙中的初音未来”
-
深圳精敏元宇宙场景建造师 打造元宇宙虚拟场景
内容概要:当下,元宇宙雏形出现,底层架构、关键核心技术、硬件条件、网络环境等尚未完全成熟,虽然我们距离终极元宇宙还非常遥远,但元宇宙不是造梦的概念。
-
斯坦福大学开设“元宇宙第一课”:人类成为现实与虚拟世界的两栖物种
-
韩国首尔宣布:将成为全球首个加入元宇宙的城市
内容概要:韩国首都宣布它将成为第一个进入元宇宙的大都市。它将在元宇宙中提供各种公共服务和文化活动,这是一个依靠虚拟现实的沉浸式互联网。
-
大趋势,大赛道:元宇宙十大产业发展
-
著名经济学家朱嘉明:元宇宙的商业前景、技术路径和治理规则
-
国内首家元宇宙主题乐园即将落地,文旅行业开始拥抱元宇宙!
-
教育界纷纷入局,揭秘“元宇宙”引领教学变革
内容概要:如果元宇宙能保持良好的开放性和共享性,这意味着未来,普通人也能接触到优质的国际教育资源,获得更多更好的学习机会。在即将到来的全新时代,我们期待元宇宙带给教育无限可能……
-
岁末狂欢 在元宇宙跨年是一种什么样的体验?
-
沉浸式体验对于元宇宙是发展关键,科技巨头极力打造VR/AR产业链
-
基于真实世界的创新影像,看到科技助力元宇宙
-
元宇宙新地王2740万元刷爆纪录!虚拟炒房一周成交6.37亿,约为100套北京学区房
内容概要:在现实不存在的虚拟土地上,花费数百万美元去买房置业?听上去可能很可笑,但是那些看好虚拟现实未来的狂热预测正促使投资者转向元宇宙里的数字房产。
-
亚太元宇宙新纪元峰会
-
元宇宙与中国神话
-
和林俊杰在元宇宙做邻居,要花多少钱?
内容概要:林俊杰在元宇宙游戏中买了三块虚拟土地,每块均价为6000MANA(MNAN是虚拟世界平台Decentraland的代币),价格约19.5万元,三块地折合人民币78万元。
-
元宇宙主题基金能否躺赢?
内容概要:元宇宙科技的发展一定是充满了希望的,但元宇宙主题基金绝不可能躺赢,太多的不稳定因素和风险需要被考量,投资者需要参考各基金经理的历史业绩和专业背景,基于数据去做科学的投资判断。
-
元宇宙经济体系的核心要素:区块链与数字货币
内容概要:人们通过用区块链技术搭建经济体系的办法,就让元宇宙世界和现实世界在经济系统上、社会系统上、身份系统上进行密切的融合,并且允许每一个用户进行内容的生产和编辑。
-
元宇宙经济学
-
2022年Q1最受关注的元宇宙十大事件
内容概要:元宇宙在目前的技术应用中最受关注的当属多地跨年晚会上的虚拟人,同时,“人工智能+数字人”也开始了新尝试;而近期NFT数字藏品备受关注和争议,数字藏品炒作乱象丛生。
-
虚拟偶像现状:B端变现、破圈难、二八效应明显
-
「虚拟老黄」骗过你,但你能摸到夏语冰的手?|新智元「元宇宙,新人类」论坛万字干货
内容概要:3月30日下午,新智元「元宇宙,新人类」论坛大咖云集!新智元杨静、英伟达沈威、万向区块链肖风、小冰李笛、浪潮刘军、STEPVR郭成、清华胡翌霖、蓝驰刘勇等倾情分享,火花四射!
-
元宇宙将有750亿新人类?新智元《中国AI和元宇宙产业七大趋势》(附PDF下载)
内容概要:元宇宙市场复合增长率将是AI的10倍,真人与虚拟人交互爆发式增长。未来元宇宙里10个人可能有9个是虚拟人。2021年,新智元选出的TOP10虚拟人都有谁?
-
推出AvatarX智能虚拟人平台 相芯科技赋能企业元宇宙生态
内容概要:近日,相芯科技推出AvatarX智能虚拟人平台,依托独创的“虚拟数字人引擎”,可帮助客户定制各类虚拟人“套餐”,赋能企业元宇宙生态,助推元宇宙产业发展。
-
品牌方很有钱想自己做一个虚拟偶像,会遇到哪些问题?成本几何
-
追风365天:元宇宙的罗生门
内容概要:元宇宙究竟是下一个互联网形态还是另一个典型的中国式风口?面对滚滚而来的拥护和批判,我想大家心里都有自己的答案。
-
元宇宙与春晚“碰撞”背后,这四家科技公司身影显现
内容概要:春晚已经成为展示新科技的最大流量入口。文化传媒是元宇宙的重要应用场景。在这些“元宇宙”春晚背后,有哪些科技公司的加持?这些公司又是如何布局元宇宙的?
-
元宇宙:从舆论喧嚣到理性回归
内容概要:加强对元宇宙在激活中华优秀传统文化应用中的研究,在人类知识文明创新体系中构建宇类文明,激活、重塑、创新中华文明。
-
打开元宇宙的拜年方式,照进现实的虚拟偶像们
内容概要:现实中,每个人都藏在表情包之后,情感宣泄没有出口,因此大家去追星,将心目中的理想形象投射在现实人物中。随着技术的发展,AI或许会改变下一代虚拟偶像的本质,让这些虚拟偶像们更完美无缺。
-
围绕元宇宙和智慧城市专题,第五届进博会设立人工智能专区
-
BIGCHINA:认识元宇宙技术的一个框架
-
元宇宙带来文明跃迁:人类新物种4.0
-
投入100亿美元后,全球最大社交媒体巨头Meta究竟如何布局元宇宙?
-
“她”对元宇宙的另类解读,女性经济下的元宇宙如何发展?
-
元宇宙瞄准知识赛道 数字人“Dr.Yu宇博士”正式上线
-
元宇宙化身创建平台Ready Player Me与Nemesis达成合作
内容概要:据VentureBeat报道,元宇宙化身创建平台Ready Player Me与Nemesis达成合作,如今,Nemesis用户可以在虚拟世界中采用Ready Player Me化身。
-
为什么虚拟人是元宇宙的第一入口,小白搞懂虚拟人技术和场景
-
哪些因素促进了元宇宙的发展?
-
巴拉巴拉进军元宇宙——打破次元壁,“邀”全球首个儿童数字人代言