南京海米云信息科技有限公司 025-85989270

元宇宙-虚拟数字人概述

发布者:147小编 时间:2023-12-14

随著元银河系基本概念的浓厚兴趣,这场“元银河系”有关的基本概念、商品骤然正式成为蓝海,不光是对AR/VR产业发展的影响非常大,所以交互式位数人做为元银河系中关键原素也被推至的蓝海中心,所以交互式位数人是怎样产生的?控制技术是怎样同时实现的了?

什么是交互式位数人

现阶段交互式位数人从基本概念上主要就为分成药理学专业领域的位数人和网络专业领域的位数人

药理学版交互式位数人

药理学版的交互式位数人主要就透过采集消化系统数据,透过对尸体进行精细解剖学造影器重建,交互式化消化系统,大体需要经历**交互式建模人→交互式力学人→交互式生理人→交互式智能人,**如下表所示图右图

药理学版的交互式位数人,用来做什么了?

交互式扫描器,图像设备扫描器总体规划交互式产后总体规划(包含外科手术总体规划、术中和产后治疗)虚实融合,力学世界操作产后机器人,对交互式位数人进行产后药理学医学专业,不光是产后教学科学研究该药,药物辐射科学研究力学模拟(消化系统碰撞试验等)

市场情况怎样?

该科学研究课题科学研究从2000年开始就在各大高校、医院开展了科学研究,但是从孵化企业暂时没有看到龙头的企业,随著元银河系的“火灾”,药理学版交互式位数人能正式成为药理学领域非常关键的科学研究课题继续“火灾”

网络控制技术的交互式位数人

网络控制技术同时实现的交互式位数人主要就透过尚普托控制技术、动作捕捉、音频合成、AI驱动力等控制技术,在借助与AR/VR控制技术,交互式出“人”,这个人可以随意切换,随意想象,是根据人偶相貌创造出交互式“人”,比如《你好星期五》中小漾(交互式主播),如下表所示图右图

基于网络控制技术交互式位数人应用领域有四方面了?

交互式主播交互式IP,在元银河系中交互式人身份保镳交互式方丈人交互式童星交互式客服......

交互式位数人多元产业发展渗透

交互式位数人市场估值与“小厂”改投

随著元银河系“火灾”,网络控制技术的交互式位数人正式成为了“小厂”,追逐主要就赛车场,如下表所示图右图网络模式的交互式位数人规模逐步放大

“小厂”相继改投

网络控制技术交互式位数人牵涉的控制技术路径

数据服务控制技术交互式位数人重构走线主要就分成:布偶驱动力和AI驱动力(排序驱动力),从表现形式上又分成2D交互式位数人和3D交互式位数人,其实现阶段大部份交互式主播、交互式主播、交互式童星背后都有布偶驱动力做为支撑,动态图形排序驱动力交互式位数人,控制技术同时实现昂西桑县,生产成本较低,**怎样低生产成本构建一个交互式位数人,做为UGC工具具有广泛的应用领域空间。**右图右图交互式位数人重构走线

基础控制技术路径主要就牵涉到NLP(语义处理)、CV(视觉)和音频(ASR (音频辨识)、TTS(音频合成))和信号处理控制技术,需要较强的综合控制技术能力,现阶段国内除了“小厂”具备三个路径强大优势平台

右图大体总结一下,交互式位数人“大脑”→概要/对话系统(creates同时实现),情感辨识控制技术(多逻辑系统演算法同时实现内容理解);交互式位数人“听,说”→ASR控制技术完成音频辨识部份,TTS部份主要就来合成wav

交互式位数人“动”→动态图形、动态驱动力,wav2lips(唇动驱动力),wav2motion(手势、表情、消化系统姿态)驱动力

布偶驱动力控制用例

如下表所示图右图布偶驱动力案例,现阶段布偶驱动力的生产成本也是较低的

布偶驱动力UGC工具,纯视觉方法,透过CV捕捉布偶消化系统姿态、手势和表情动作 通驱动力控制技术进行驱动力

聚力维度打造的人工智能动画制作软件赛博演猿

AI驱动力(排序驱动力)

排序型驱动力,需要NLP、CV、音频和图形图形四个路径紧密配合,如果需要做到动态图形智能化程度,需要非常大的排序硬件生产成本(同事包含排序和图形图形),现阶段AI驱动力也只能做到唇动、脸部部份表情驱动力,但是2D交互式位数人(“纸片人”)控制技术同时实现更加容易一些

交互式位数人开源项目调研

PaddlePaddle生态打造2D交互式主播(参考JiehangXie/PaddleBoBo)可以说是排序型驱动力的案例了

kalidokit

支持2D、3D交互式人驱动力,可支持手势、姿态和表情三种联动,支持PC端和APP端,基于tensorflow社区打造,采用tensorflow.js完成,可以尝试使用单目摄像头完成驱动力任务

聚力维度打造的人工智能动画制作软件赛博演猿

感觉挺友好的UGC 布偶驱动力工具,官网好像没有软件的下载链接

参考文献

用一篇文章,帮你了解什么是交互式位数人?

交互式位数人:元银河系的主角破圈而来

量子位-交互式位数人深度产业发展报告

清华大学元银河系报告2.0报告

交互式位数人:溯源、应用领域和发展

[1] 佚名. 高分辨位数消化系统三维结构数据集的构建与建模[J]. 科学通报, 2008, 53(10):7.