新知榜官方账号
2023-07-03 17:14:50
云舶科技是以全栈式无穿戴AI视频动捕技术为核心的泛娱乐内容服务商。拥有小K娱乐平台(小K直播姬)、小K开放平台和小K动画制作平台(小K网)三大业务线。本文介绍了云舶科技的视频动捕技术及其在虚拟偶像、游戏等领域的应用。
云舶科技自主研发的基于普通摄像头的无穿戴AI视频动捕技术可以通过AI算法对视频里的人物进行姿态捕捉,获得人体运动数据。用户无需穿戴硬件设备即可实时得到视频内人物的三维动作信息,包括肢体,手指,面部表情等全栈式三维数据。这一动捕技术为云舶科技首创,已获得专利。传统的动捕技术有两类,一类是惯性动捕,一类是更早出现的光学动捕。惯性动捕需要通过用户穿戴惯性传感器设备捕捉身体运动数据,经过数据处理后建立3D数据。光学动捕需要在专门的摄影棚进行,用户也需要穿戴传感器设备,由多个高速相机从不同角度对传感器进行监视和跟踪,生成身体动作数据。目前,这两类动捕技术被用于电影、动画创作中,设备成本在几十万到几百万元不等。而云舶科技的视频动捕技术无需硬件动捕设备,通过AI算法就能实时捕捉视频内人体关键的骨骼点。
云舶科技的视频动捕技术产生了三大业务线:小K网、小K娱乐平台和小K开放平台。
小K网于19年底开放,旨在为动画师提供更便捷的动作数据获取方式,减少动画制作时间和成本。用户可上传30s以内的动作视频,等待约5分钟左右就可以预览和下载bip、fbx格式的动作数据。目前内测阶段为动画师免费开放。云舶科技通过QQ群等平台获得用户的反馈意见,不断迭代技术效果。
小K娱乐平台致力于利用视频动捕技术批量打造虚拟主播,提供娱乐内容服务。率先推出的虚拟直播产品“小K直播姬”将在近期开始在直播平台内测。小K直播姬降低了3D虚拟主播的应用门槛,只需普通摄像头就能进行直播表演。另外,云舶科技注重虚拟直播中的游戏化交互内容。云舶科技CEO梅嵩认为,交互性内容玩法是虚拟直播相比真人直播的优势,也是提升用户的消费意愿的方式。
小K开放平台是为游戏开发者和内容创作者提供视频动捕技术的平台。云舶科技已和腾讯、完美、4399、华清飞扬等公司的游戏产品进行项目合作,覆盖了MMO、卡牌、AR、沙盒等游戏类型,打造游戏玩家UGC动作生成功能。玩家通过上传视频就能为游戏角色生成自创动作,并且可以分享动作。
虚拟偶像由于外形精美、人设稳定,互动性高,受众不断扩大。然而,虚拟偶像的制作成本一直居高不下。云舶科技想用视频动捕技术解决打造虚拟偶像的成本问题,并采用日常化的直播形态增加偶像活动频率,让观众保持持续的新鲜感和交互感,增加粉丝粘性。
未来生产一个虚拟人物的成本将只包括美术资产成本和内容创作成本。梅嵩表示,未来视频动捕技术有希望成为行业主流,届时,云舶科技将不仅限于是一家技术供应商,而是内容服务商,会将内容作为核心竞争力,并希望和虚拟偶像产业链上的其他公司合作,不断扩大市场规模。
相关工具
相关文章
推荐
中国首款3A游戏上线,《黑神话:悟空》出圈!
2024-08-21 13:46
盘点15款AI配音工具,短视频配音有救了!
2024-08-12 17:11
短视频文案没创意?10大AI写作工具来帮你!
2024-08-05 16:23
Midjourney发布V6.1版本,我已分不清AI和现实了!
2024-08-01 15:03
我发现了一款国产AI绘画神器,免费易上手!
2024-07-25 16:40
7位AI考生做今年高考题,能过一本线吗?
2024-07-19 17:17
世界上第一所AI学校来了,80亿人只需要1位老师?
2024-07-18 17:12
Sora首部AI广告片上线,广告从业者危险了!
2024-06-27 13:44
OpenAI与中国说拜拜,国产AI如何接棒?
2024-06-26 15:18
人与AI会产生爱情吗,专家发话了!
2024-06-17 17:28