热门文章
- 跨越时空的浪漫,千年名景黄鹤楼新年...
- 《2022东方卫视春晚》拥抱元宇宙,刷新...
- 澳网杀入元宇宙
- 数字中秋月,传统文化与现代科技的交...
- 乐赢携手泮庐集团打造泰兴号-文博城...
- “元宇宙”里过大年,《迷你世界》在做一...
- 总投资2亿!国内首家“元宇宙”主题乐园...
- 小红书上的美女博主AYAYI,不是人类
- Soul发布《Z世代行为年度报告》展现元...
- 虚拟人:元宇宙世界的敲门人
- 当博物馆遇上元宇宙 中国移动咪咕数...
- 元宇宙划水首选《堡垒之夜》
- 李宁首次发布NFT球鞋艺术品《悟道里的...
- 元宇宙“卷”到博物馆,速度比想象更快,...
- “修勾夜店”蹦出元宇宙
- 跑不出元宇宙的虚拟跑鞋,能否让品牌...
- Adidas Originals发布“走进元宇宙”系...
- 从“技术宅拯救世界”到“创造虚拟世界”...
- 元宇宙+:线下文旅的线上破局之路
- 元宇宙公司Meta旗下Facebook允许在特...
从5个方面,帮你了解什么是虚拟数字人?
大家好,我是 Clippp。今天为大家分享的是「虚拟数字人」。这段时间元宇宙概念的大火带动了很多人对未来的无限遐想,与元宇宙紧密相关的虚拟数字人的热度也在提升。
现在网络上经常出现各式各样的数字人,虚拟偶像、虚拟主播层出不穷,当然伴随着数字人一同出现的还有各种争议…
今天我们就来一起探究虚拟数字人是什么、具有哪些特征,分为哪几种类型以及都应用在什么行业,深入地了解虚拟数字人概念。
数字人的三方面特征
虚拟数字人是指具有数字化外形的虚拟人物。与具备实体的机器人不同,虚拟数字人依赖显示设备存在,我们所知的很多虚拟人都要通过手机、电脑或者智慧大屏等设备才能显示。
虚拟数字人应具备以下三方面特征:
一是拥有人的外观,具有特定的相貌、性别和性格等人物特征;
二是拥有人的行为,具有用语言、面部表情和肢体动作表达的能力;
三是拥有人的思想,具有识别外界环境、并能与人交流互动的能力。
综合来看,就是具备四方面的能力,即形象能力、感知能力、表达能力和娱乐互动能力。
如果我们下次再看到有公司推出数字人,就可以结合这些特征和能力来判断这个数字人的可信度,避免被借势营销的企业钻了空子。
数字人的运作原理
知道了什么是数字人,接下来就要搞清楚数字人到底是怎么说话、互动的,是背后有真人在操控,还是完全通过技术生成。
面对新兴的数字人,相信很多读者都存在类似的疑问。数字人的诞生发展和 AI 人工智能可以说是密不可分,想了解数字人的运作原理,首先要知道数字人的通用系统框架。
虚拟数字人系统一般情况下由人物形象、语音生成、动画生成、音视频合成显示、交互等 5 个模块构成。(资料参考: 2020 年虚拟数字人发展白皮书)
交互模块为扩展项,根据其有无,可将数字人分为交互型数字人和非交互型数字人。
首先看一下非交互型数字人:系统依据目标文本生成对应的人物语音及动画,并合成音视频呈现给用户。
交互型数字人根据驱动方式的不同可分为智能驱动型和真人驱动型。
智能驱动型数字人:通过智能系统自动读取并解析识别外界输入信息,根据解析结果决策数字人后续的输出文本,驱动人物模型生成相应的语音与动作来使数字人跟用户互动。
这种人物模型是预先通过 AI 技术训练得到,可通过文本驱动生成语音和对应动画,业内将此模型称为 TTSA(Text To Speech & Animation)人物模型。
真人驱动型数字人:真人根据视频监控系统传来的用户视频,与用户实时语音,同时通过动作捕捉采集系统将真人的表情、动作呈现在虚拟数字人形象上,从而与用户进行交互。
数字人常见的类型
调研分析当前市场上的数字人,根据人物图形维度,分为 2D 和 3D 两大类,从外形上可分为卡通、写实等风格,综合来看可分为二次元、3D 卡通、3D 高写实、真人形象四种类型。
接下来根据每种类型的特点,从外在形象、服饰装扮、表情动作等方面,结合典型案例来逐一分析虚拟数字人的设计。
1. 二次元类型
虚拟歌手-洛天依
洛天依的职业设定为虚拟歌姬,个性软萌可爱、温柔细腻,外貌特征上是灰发、绿瞳,头戴碧玉发饰。
除了独特的形象和性格,洛天依还能唱歌、跳舞、直播带货,多样的才艺加持让人物设定不单薄,受到很多用户的关注。
2. 3D 卡通类型
虚拟助理-度晓晓
度晓晓是基于虚拟人 IP 的陪伴型虚拟助理。在小度助手的能力基础上,度晓晓有虚拟人物形象和情感交互系统,具备视觉识别能力,支持自然的交流方式。
在外形装扮上,度晓晓是红色短发的甜美可爱风,五官比例偏向二次元风格。根据现有案例来看,度晓晓在眨眼、微笑等面部微动作以及肢体的造型,都很自然、生动,整体设计效果相对较好。
度晓晓定期更新身穿不同主题服装、摆着各种 pose 的形象,每套服装都有一个主题再带配上各种周边小配饰,营造出一种清新时尚的效果。
3. 3D 高写实类型
浦发银行数字员工-小浦
小浦作为银行的数字员工,主要进行风险评估、要闻播报、投资建议等在线服务。
从外观上,小浦在形象上无论发型还是五官都足够拟人化、职业化,穿着银行职业装,属于比较典型的银行职员形象。
小浦没有很夸张的面部表情,始终以面带微笑的状态面向用户,给人一种亲切感。肢体动作相对较少,没有特别夸张的动作设定,只有固定的几套动作。
虚拟偶像-AYAYI
AYAYI 是使用 Unreal 引擎造出来的特别拟真的 Metahuman 形象。
外在形象:写实程度更高,人物整体效果已经和真人十分接近,五官特别精致、眼睑微敛、银色短发,散发着一种清冷气质。
从 AYAYI 社交账号的更新来看,目前主要是分享一些 AYAYI 的摆拍图片,穿着的服装、饰品都比较真实、时尚,拍照环境都是休闲、艺术类的场景。
AYAYI 人物形象的时尚感和真实感,更容易切入商业化,比如穿着特定品牌的服装进行摆拍。
高保真数字人-Siren(塞壬)
Siren 是高保真、实时、可交互数字人,用到了实时渲染、表情捕捉、动作捕捉、高保真 3D 扫描等前沿技术,达到了目前业界最高的技术水平。
Siren 的面貌细节更加真实,可以很清楚看到皮肤的细节、眼睛的转动、说话的神态、脸上各种各样的细纹。不管是毛孔、细纹等皮肤质感,还是神态上的表情,都很像真人。
Siren 在说话时嘴唇动作自然,效果真实。
之所以有的数字人看起来不自然,很大一部分原因是因为数字人面部表情不生动,特别是在说话时嘴唇和脸部、牙齿甚至舌头的联动,很容易出现动作不联动、不真实的情况。
4. 真人形象类型
新华社 AI 合成主播-新小浩
“新小浩”是无论外在形象、面部表情、服装搭配、说话声音,还是肢体动作上,都是完全基于真实主持人生成。
通过语音合成、唇形合成、表情合成以及深度学习等技术,克隆出具备和真人主播一样播报能力的“AI 合成主播”。
我们每天都会遇见各种各样的人,即使脸上最细微的表情,我们都可以感知到,用计算机打造出来的表情,往往缺乏灵气。真人形象的虚拟主播的优势在于,他的特征都是来源于真人,呈现的面貌和状态更容易被用户了解。如果不仔细看,可能分辨不出是不是真人。
数字人的应用场景
目前国内市场上已经出现了非常多的虚拟数字人,在各行各业中有着广泛的应用。
虚拟数字人技术结合实际应用场景领域,切入各类行业,形成行业应用解决方案,赋能影视、传媒、游戏、金融、文旅等领域,根据需求为用户提供定制化服务。
按照应用场景或行业的不同,已经出现了娱乐型数字人,如虚拟偶像、歌手、网红、虚拟代言人等;
助手型数字人,如虚拟客服、虚拟导游、智能助手。
主播型数字人,如虚拟主播、虚拟支持人等。
这里搜集的案例只是虚拟数字人的应用的一小部分,还有很多优秀的应用案例等待着大家去一起发现。
代表性的研发平台
国内有很多互联网平台在研发虚拟数字人,我也从中收获了大量的信息和资料,这次把这些平台分享给大家:
搜狗AI开放平台:https://ai.sogou.com/
百度AI开放平台:https://ai.baidu.com/
NEXTStudios:https://www.nextstudios.com/
讯飞开放平台:https://www.xfyun.cn/
元宇宙神评
相关主题
-
《虚拟数字人:元宇宙的主角破圈而来》(附下载)
内容概要:虚拟数字人指存在于非物理世界中,由计算机手段创造及使用,并具有多重人类特征(外貌特征、人类表演能力、交互能力等)的综合产物。随元宇宙热潮,虚拟数字人作为先发场景产业备受关注。
-
京东云举办虚拟数字人专场沙龙 揭秘“元宇宙中的初音未来”
-
深圳精敏元宇宙场景建造师 打造元宇宙虚拟场景
内容概要:当下,元宇宙雏形出现,底层架构、关键核心技术、硬件条件、网络环境等尚未完全成熟,虽然我们距离终极元宇宙还非常遥远,但元宇宙不是造梦的概念。
-
韩国首尔宣布:将成为全球首个加入元宇宙的城市
内容概要:韩国首都宣布它将成为第一个进入元宇宙的大都市。它将在元宇宙中提供各种公共服务和文化活动,这是一个依靠虚拟现实的沉浸式互联网。
-
大趋势,大赛道:元宇宙十大产业发展
-
著名经济学家朱嘉明:元宇宙的商业前景、技术路径和治理规则
-
国内首家元宇宙主题乐园即将落地,文旅行业开始拥抱元宇宙!
-
教育界纷纷入局,揭秘“元宇宙”引领教学变革
内容概要:如果元宇宙能保持良好的开放性和共享性,这意味着未来,普通人也能接触到优质的国际教育资源,获得更多更好的学习机会。在即将到来的全新时代,我们期待元宇宙带给教育无限可能……
-
“元宇宙”概念爆火后,虚拟人会是下一个增长点吗?
-
岁末狂欢 在元宇宙跨年是一种什么样的体验?
-
沉浸式体验对于元宇宙是发展关键,科技巨头极力打造VR/AR产业链
-
基于真实世界的创新影像,看到科技助力元宇宙
-
元宇宙新地王2740万元刷爆纪录!虚拟炒房一周成交6.37亿,约为100套北京学区房
内容概要:在现实不存在的虚拟土地上,花费数百万美元去买房置业?听上去可能很可笑,但是那些看好虚拟现实未来的狂热预测正促使投资者转向元宇宙里的数字房产。
-
亚太元宇宙新纪元峰会
-
元宇宙与中国神话
-
和林俊杰在元宇宙做邻居,要花多少钱?
内容概要:林俊杰在元宇宙游戏中买了三块虚拟土地,每块均价为6000MANA(MNAN是虚拟世界平台Decentraland的代币),价格约19.5万元,三块地折合人民币78万元。
-
元宇宙主题基金能否躺赢?
内容概要:元宇宙科技的发展一定是充满了希望的,但元宇宙主题基金绝不可能躺赢,太多的不稳定因素和风险需要被考量,投资者需要参考各基金经理的历史业绩和专业背景,基于数据去做科学的投资判断。
-
元宇宙经济体系的核心要素:区块链与数字货币
内容概要:人们通过用区块链技术搭建经济体系的办法,就让元宇宙世界和现实世界在经济系统上、社会系统上、身份系统上进行密切的融合,并且允许每一个用户进行内容的生产和编辑。
-
元宇宙经济学
-
虚拟人载中华文化,在元宇宙出海
内容概要:有人说,如果将元宇宙比作驶向未来的飞船,那么虚拟数字人是第一张船票。而在文化领域,虚拟数字人也因其不设限的特质而拥有无限可能。
-
中国虚拟偶像“待爆” 市场今年有望达13亿元
内容概要:在线游戏和在线社交属于更容易贴近元宇宙落地生态的典型场景,而虚拟偶像属于其中比较有代表性的元素之一,更容易做商业化拓展。
-
虚拟偶像不会人设塌房?永远消失都有可能!
-
虚拟偶像想要破冰元宇宙,靠科技还是靠粉丝?
内容概要:作为科技创新与文化创意深度融合的产物,虚拟人是新的文化业态和新模式。真人艺人的虚拟偶像在这个领域的探索和表现,尤为受到业内观察人士的期待。
-
数字人、元宇宙、互联网3.0……走进2022全球数字经济大会
内容概要:7月28日至30日,2022全球数字经济大会,在北京国家会议中心举办。在这场大会上,数字人、元宇宙、互联网3.0等概念频频出现。
-
元宇宙风口下,数字艺人要来了?
-
虚拟人是元宇宙入场券,但这是假噱头还是真未来?
-
元宇宙“虚拟人”已至,谁才是真正的“龙头大哥”?
-
SNH48进军元宇宙,十年偶像终成嫁衣
内容概要:在偶像经济的低潮期,选择奔向元宇宙的丝芭传媒是否能扭转颓势还未可知,只是没有“面对面的偶像”环境后,粉丝也是真正失去了曾热爱至极的“桃花源”。
-
虚拟偶像:元宇宙概念下的新星
内容概要:虚拟偶像的目前商业进程只能停留在流量思维,与传统造星差异不大,未来将会如何推进,能否与工业化流水线生产流量隔开,找到更多的商业化运作方式,突破界限。
-
据报道,Meta 已停止向广告商推销元宇宙
内容概要:在一份关于最近一轮的裁员声明中,扎克伯格仅两次提到了元宇宙,而人工智能开发则被描述为该公司的“最大单笔投资”。
-
图解网信办《生成式人工智能服务管理办法(征求意见稿)》V1.0.0(附PDF下载)
内容概要:2023年4月11日,国家互联网信息办公室发布《生成式人工智能服务管理办法(征求意见稿)》,面向社会公开征求意见,旨在促进生成式人工智能技术健康发展和规范应用。
-
《多技术融合推动,元宇宙应用破局向前:2023爱分析・元宇宙实践报告》(附PDF下载)
-
【元宇宙之约】第018期:AIGC将为元宇宙解决两个技术难题
-
GPT-4技术报告(附中、英文PDF下载,含GPT-4 System Card_中文)
内容概要:这份技术报告介绍了 GPT-4,一种能处理图像和文本输入并生成文本输出的大型多模态模型。这类模型非常重要,因为它们有潜力被广泛应用于对话系统、文本摘要和机器翻译等领域。
-
英伟达元宇宙获得新硬件支持
内容概要:英伟达负责专业可视化的副总裁Bob Pette在本周举行的年度GTC(GPU技术大会)前的新闻发布会上表示,这家芯片制造商推出了一款名为OVX 3的新服务器,旨在创建和操作元宇宙。
-
武昌区域媒体联盟成立 虚拟形象代言人“武畅儿”亮相
内容概要:“‘武畅儿’形象的推出,既是武昌创新城区形象宣传的推介手段,也是布局元宇宙新赛道,培育新型文化业态,构建数字文化创意产业生态圈的重要举措。
-
《黑镜》里“自制”AI男友成真,GPT让普通人轻松构建元宇宙
-
《中国人工智能产业研究报告(Ⅴ):道阻且长,行而不辍》(附PDF下载)
内容概要:AI成为企业数字化、智能化改革的重要抓手,也是各行业领军企业打造营收护城河的重要方向。落地AI应用对企业业务运营的商业价值与战略意义越来越明确。
-
加速元宇宙创新生态,阿里云和伙伴一起探寻奇点