虚拟数字人的发展历程及技术应用

新知榜官方账号

2023-09-09 16:18:46

虚拟数字人的发展历程及技术应用

虚拟数字人起源于上个世纪八十年代的日本经典动画片《超时空要塞》的女主角林明美。2000年-2016年，虚拟数字人还只是停留在研究阶段。2016年以来，深度学习和元宇宙的出现，使得虚拟偶像一夜火遍全世界。

虚拟数字人根据驱动方式的不同可分为AI智能驱动型和真人驱动型。在真人驱动型虚拟数字人中，真人也被称为“中之人”，配合动作捕捉设备，让虚拟数字人能够与观众进行实时交互。而AI智能驱动型虚拟人，则是通过智能系统自动读取并解析识别外界输入信息，根据解析结果决策输出文本，驱动人物模型生成相应的语音与动作与用户交互。

虚拟数字人的口型和微表情等微动作较多，真人拍摄耗资巨大，AI语音口型驱动成为主流。AI语音驱动虚拟数字人微表情AI语音驱动又称为虚拟形象语音动画合成技术（Voice-to-Animation），用户通过输入文本或语音，以一定规则或深度学习算法，生成对应的3D虚拟形象的人脸表情系数，完成口型和面部表情的精准驱动。开发者可以快速构建丰富的虚拟形象智能驱动应用，如虚拟主持人、虚拟客服、虚拟教师等。

根据输入内容的不同（文本/语音），可以分为三种驱动方法：语音驱动、音素驱动、语音和音素多模融合驱动。其中，语音和音素多模融合驱动方法效果最好，但模型更复杂。

AI语音驱动虚拟数字人全身近期，百度推出了语音驱动虚拟数字人全身动作的算法框架Speech2Vedio。是一种从语音音频输入合成虚拟人全身运动视频的任务。该论文作者将3D骨骼知识和模型学习的个性化语音手势字典，嵌入到整个模型的学习和测试中。通过3D人体骨骼知识限制生成的动作幅度，限定符合正常人类肢体的伸展范围，通过语音驱动算法合成符合语音场景的动作，形成协调一致，口手合一的虚拟数字人形象。

AI语音驱动虚拟数字人作为虚拟人落地的核心技术，不仅大幅节省了制作成本，同时精细化的培养了虚拟数字人口手合一的协调性。

AI语音驱动技术的重要底座自2021年以来，相关部门纷纷出台政策大力支持人工智能、区块链、大数据等产业的发展，而虚拟数字人产业则是这些产业的重要组成部分。根据量子位发布的《虚拟数字人深度产业报告》预测，到2030年，我国虚拟数字人整体市场规模将达到2700亿元。MagicData作为全球领先的AI数据解决方案提供商，拥有海量经由专业录音棚录制的高质量数据集。MagicDataTTS数据集涵盖天津话、东北话、四川话、上海话、广西话、长沙话众多方言。同时，拥有英语、葡萄牙语、韩语等多语种TTS数据。并能够匹配男声、女声、童声、二次元、甚至Rap说唱等各类需求。让虚拟数字人的互动拥有更多丰富的可能性，助力企业实现业务增长。

本页网址：https://www.xinzhibang.net/article_detail-11116.html

寻求报道，请

关键词

分享至微信：

相关工具

WellSaid Labs

AI文本转语音工具

Typecast

在线AI文字转语音生成工具

Veed AI Voice Generator

Veed推出的AI语音生成器

Notta

AI在线将语音转换成文字

Mubert

AI BGM背景音乐生成工具

网易天音

网易推出的AI音乐创作平台

中国式浪漫

中国式浪漫中国式的浪漫有着独特的韵味，充满了婉约而华贵的情感。从古至今，我们常常可以看到一些文艺作品中描绘的恋人们穿越古代的长廊，相互倾诉着深情而含蓄的爱意。这种浪漫，不单单是一种场景的表达，更多的是一种文化的传承。在现代社会中，这种东方之美依然在中国式的爱情中得以体现。例如，现代新人在婚礼上常常选

分类标签中国式浪漫传统文化现代社会

12-07 22:22

如何学习插画？插画师必备的素材灵感网站大全

如何学习插画？插画师必备的素材灵感网站大全想要学习插画，你需要了解一些学习技巧，以及在哪里寻找学习绘画的素材。本文为你收集整理了一些关于如何学习插画的教程，以及插画师必备的素材灵感网站。插画师必备的素材灵感网站：ArtStation：主要以游戏或者影视的概念艺术设定及3D模型为主，这里基本上都是极高

分类标签插画学习技巧绘画资源

12-05 02:08

字节跳动海绵乐队：进军AI音乐创作领域

字节跳动海绵乐队：进军AI音乐创作领域近年来，随着人工智能技术的不断发展，AI音乐创作已经成为了音乐领域的热门话题。2021年初，字节跳动推出了一款名为“海绵乐队”的APP，该应用引入了大量AI技术来协助音频创作和编辑。与传统的音乐录制和编辑工具不同，“海绵乐队”具有录音棚、弹唱优化、一键remix

分类标签字节跳动海绵乐队AI音乐创作人工智能

12-01 22:29

配音网站上的真人配音怎么做，最全攻略免费送

配音网站上的真人配音怎么做，最全攻略免费送配音网站的功能有两种，一种是为专业配音人员搭建商务平台，在行业中发挥自己的专业优势。一种是为用户提供专业的配音服务，其中包括智能配音和真人配音两种情况。所以配音网站的存在也可以看作是为用户和配音人员搭建起来的沟通桥梁，在各取所需的基础上为大家带来高质量的合作

分类标签配音网站真人配音智能配音

11-25 16:20

八款AI智能软件，提高工作效率，解决各种日常问题

聊天机器人——ChatGPTChatGPT是一款功能强大的聊天机器人，它能够像人类一样聊天交流，还可以写邮件、写论文、写视频脚本，翻译、敲代码等，帮助我们提高工作效率，解决各种日常问题。写作助手——NotionAiNotionAi是一款强大的写作助手，它能根据输入的关键词，推荐相关的文章素材，可以帮

分类标签 AI智能软件提高工作效率解决日常问题

11-23 22:11

如何快速制作小和尚开口说话视频并实现快速变现

近来，小和尚开口说话视频风靡一时，不少人通过这种方式实现了快速变现。本文将为您介绍制作这种视频的方法。小和尚图片制作使用AI辅助工具midjourney，通过输入小和尚的描述词并将其翻译成英文，即可自动生成高清的小和尚图片。从系统提供的多张选项中选择最满意的图片，并下载保存。文案与音频制作从同行的热

分类标签小和尚开口说话视频快速变现

11-19 16:18

阿才与狐仙的爱情故事

阿才与狐仙的爱情故事阿才与狐仙的爱情故事，是一个流传千古的美丽传说。在古老的村庄里，阿才与狐仙相遇，经历了许多艰难险阻，最终战胜了邪恶的道士，过上了幸福美满的生活。阿才是一个年轻人，长相英俊，但因为家境贫困，一直未能娶到心仪的姑娘。然而，他并没有因此灰心丧气，依然努力生活，相信自己终有一天会遇到自己

分类标签阿才狐仙爱情故事

11-19 16:17

协助老年人从仰卧位转换为床边坐起

协助老年人从仰卧位转换为床边坐起随着人口老龄化的加剧，老年人的护理成为了一个重要的问题。协助老年人从仰卧位转换为床边坐起是老年人护理中的一个重要环节，需要护理员具备一定的专业知识和技能。下面，我们来介绍一下具体的步骤和注意事项。步骤老年人自愿且身体状况允许。护理员穿戴整齐，洗手并表现得温和。全面评估

分类标签老年人仰卧位床边坐起

11-19 16:15

数字人、TTS、VR等技术助力苏州广电传媒集团在苏州文化创意设计产业交易博览会中获得成功

数字人、TTS、VR等技术助力苏州广电传媒集团在苏州文化创意设计产业交易博览会中获得成功近日，在第十二届中国苏州文化创意设计产业交易博览会（以下简称“苏州文博会”）中，苏州广电传媒集团（总台）（以下简称苏州广电）以“数字赋能广电+文化”为主题参展，用数字人、TTS、VR等技术为现场观众带来了沉浸式的

分类标签数字人TTSVR

11-19 16:14

民间故事：麻雀报恩

民间故事：麻雀报恩从前有兄弟二人，老大性格霸道，老二温和善良。父母去世后，兄弟俩分家产，老大独占了良田和房屋，而老二只得到了一间小房子和一小块薄田。一天，老二在家中听到麻雀的叫声，开门一看，发现一只幼鸟从屋檐上的窝里掉了下来，摔断了腿。他很可怜这只小鸟，便捡起来找了一段布条，小心翼翼地把它的腿缠起来

分类标签民间故事麻雀报恩善良

11-19 16:13