世优科技最新推出动作捕捉技术与实时数字人技术

瓜子脸、大眼睛、高马尾……一个可爱活力的二次元美少女，在荧屏上唱歌跳舞，让人挪不开眼。可镜头一转，画风突变，这个二次元美少女的真身竟然是个五大三粗的的大老爷们。

是不是一个令人头大的反转？

这，就是世优（北京）科技有限公司（以下简称世优科技）动作捕捉技术与实时数字人技术的直接体现。品牌虚拟吉祥物可以在节目、晚会中与人们互动；动漫角色可以跳出剧情，与粉丝亲切交谈。像杰克用意念控制阿凡达一样，不需后期制作，实时即可完成。

在世优科技的“虚拟工厂”里，已经有近400个虚拟人物被这样成功复活。

而这一切，都源于创始人纪智辉一个看似荒诞的想法。

“我们不仅能够做到，还能做得更好”

2010年，好莱坞导演卡梅隆的3D巨作《阿凡达》在中国内地上映，炫酷的画面和技术让国内观众大受震撼。不少人熬夜排队买票，一票难求。

就像一颗种子，《阿凡达》拉开了3D版立体电影的序幕，也让创业多年的纪智辉，又一个梦想发芽：“里面的虚拟技术，我觉得我们不仅能够做到，还能做得更好。”

乍一看，纪智辉的想法是不是有些荒诞？

怎么着，《阿凡达》也是号称十年酝酿、四年打造、5亿美元成本、史上最贵，岂会说超就超？纪智辉这个预判，从何而来？

其实纪智辉早在2004年，就与合伙人组建了虚拟技术实验室，开始研究包括数据挖掘、图形图像算法、工作流引擎、实时动捕技术等前沿技术，成为国内比较早一批研发实时数字人技术的高顶尖团队，但是当时的市场一直没有成熟落度化的应用。

直到《阿凡达》的出现，让他嗅到了虚拟技术的潜在市场，积累多年的技术终于有了变现的风口。

“《阿凡达》采取的主要是动作捕捉技术。演员穿上一套特殊的服装，上面有很多感应球，用来记录捕捉到演员的表情动作数据，但并不是实时全身动捕。那时候的表情捕捉技术十分有限，很难实时追踪嘴唇实时运动踪迹。而是采用先记录下面部和身体数据表演捕捉数据，结束后再将捕捉的演员数据放到工作站上后期解算，然后经过人工精修，最后再离线渲染等多个工序才能输出最终画面。”纪智辉说。

长期在实验室从事动作捕捉技术研究，让他意识到，这项技术还可以再优化，实现“实时”复制，不用再有后期的渲染和加工。

于是在2011年，世优科技诞生了。

“像杰克一样，用意念操控阿凡达”

2020年底，一批国漫迷在追剧、催更《狐妖小红娘》时，惊喜发现，自己的偶像涂山苏苏竟然从动漫中走出，开起了直播。

一头金黄的头发、两只粉色的狐狸耳朵、一袭粉白国风少女裙，“原装”的涂山苏苏，在直播间卖萌、跳舞、唱歌，还和粉丝进行实时互动。不少粉丝惊呼：有生之年看到了“活着”的女神。

其背后的支撑技术，就是纪智辉最初的设想—实时数字人技术。

就像一场双簧或者提线木偶表演，屏幕前的虚拟人物摆出各种姿势，跳跃、旋转、唱歌、做鬼脸；屏幕后则是一个真身演员，身穿动捕服、头戴面部设备、手戴数据手套，与任意虚拟形象进行点对点的绑定，进行实时消抖运算、动画修正、处理表情身体手指的同步，并把数据实时发给渲染引擎，进行即时渲染与环境模拟，轻松地对屏幕前的虚拟人物进行操纵。

“就像杰克躺在舱里，用意念控制了一个阿凡达，让阿凡达按照他的意愿活动说话，就是这样一个概念。”纪智辉说。

在虚拟世界里，除了虚拟数字人，还有虚拟场景才能构成虚拟世界。

2021年央视牛年春晚的舞台上，一首《牛起来》让很多人印象深刻。在虚拟的大红中国元素舞台上，刘德华时而置身于金边红色高台，时而置身于“中国结”上与机械牛共舞，简直炫酷到没朋友。歌曲最后，舞台由虚入实，刘德华与王一博、关晓彤合唱互动，完美融合。

无缝衔接的画面，让很多人以为刘天王也来到了春晚现场。但事实上，除了王一博、关晓彤和真实的春晚舞台，刘德华部分的演出都是由世优科技的实时虚拟合成系统实时抠像合成。

此外，在虚拟场景打造方面，更是制作了“TCL双11总裁直播、伊利金领冠年味大街带货直播、网易大话西游青春同路直播、飞碟汽车全系新品发布会、腾讯王者荣耀KPL虚拟直播”等知名案例。

作为国内实时虚拟技术的先行者，世优科技如今已经成为众多品牌和平台的首选技术提供商。至今服务腾讯、天猫、京东、网易、华为、小米等头部品牌商超1000个，与央视、凤凰卫视、东方卫视、湖南卫视、浙江卫视等达成深度合作，成功复活的虚拟人物近400个。2020年，实现了近3000万元的营收额，今年预计超5000万元。

“有锤子却没有钉子”

不到10年间，纪智辉的理想照进现实，带领世优科技成为行业领军者。但是回首创业路，其实并没有那么容易，世优科技甚至坐了好几年的“冷板凳”。

2011年，新生的世优科技，很快陷入了一个尴尬的境地：有技术积累，没有硬件设备；等两者都有了，却没有适合的市场。

“我们算是涉足虚拟技术很早的一批，当时全球都买不到相关穿戴设备，也没有经过验证的商业模式。《阿凡达》制作使用的设备都是他们内部研发，且只有部分身体设备。所以我们全部都是自己进行设计和研发。”纪智辉说。

因为有前期多年的技术储备，在2012年，世优科技就自主研发出了Puppeteer虚拟工厂系统，这是国内首创的实时&快速虚拟内容制作、虚拟IP打造平台，实时数字人和快速动画制作技术在国内外都处于领先水平。

但彼时的市场并不给力。

“2014年之前，国内使用的还是3G网络，也没有WiFi，这样的通信基础条件根本无法支持大规模地推行虚拟技术，国内也没有这种类型的电影。所以很少有人用我们的技术，一般还是采用传统CG（计算机绘图）人工制作方式做动画。”纪智辉说。

空有一流技术，却没有市场，世优科技被多个投资人调侃：“典型的有锤子却没有钉子。”但因为对虚拟市场坚定看好，“只出不进”的世优科技并未被抛弃。

随着4G、5G网络铺开，短视频、直播等各种新业态浪潮迭起。尤其是随着Z世代（即1995~2009年间出生的一代人）的崛起，二次元、三次元文化在年轻人当中成为潮流。真人演绎和传统CG动画无法实时还原虚拟世界的精妙，且制作成本高、效率低，市场对虚拟技术的诉求越来越高。

到了2017年，世优科技才终于有了大施拳脚之机。

“未来有万亿的蓝海市场”

如今的世优科技，实时虚拟技术已运用在教育、媒体、影视动漫、游戏、综艺娱乐、金融、品牌营销、直播/短视频等多个领域，用纪智辉的话说是“现阶段世优科技对外的业务，无论是从技术算法、硬件设备、软件系统、技术制作等多方面均能提供全体系的技术和产品的商业化应用。”

不过在他看来，实时虚拟技术仍处于早期阶段，很多行业和领域都没有铺开，未来将有万亿的蓝海市场。

仅从直播行业来看，据前瞻产业研究院数据，2019年中国视频直播行业收入达到 1082 亿人民币，全国有 3.9 亿人在关注虚拟偶像，其中最大的二次元活动社区B站月活用户达 1140 万，虚拟主播占直播营收 40%。同期，B站、虎牙等大型直播平台也都开启了线上、线下虚拟主播活动。同期游戏市场规模达到 2300 亿，其中与数字人相关度较大的RPG类游戏约占 30%的份额。

对于公司下一步发展，纪智辉表示，将在不断提高研发水平和服务能力的基础上，在全国范围内拓展更多合作公司和子公司，推进实时虚拟技术在更大范围内落地。

今年年初，世优科技在郑州建立了分公司——郑州世优华冠动漫科技有限公司，旨在深度挖掘中原大地丰富的文化资源，打造黄河文化IP，使河南特色文化走出中原，走向世界。在此次2021年全国双创活动周上，世优华冠就将会发布少林寺的IP形象——功夫宝宝。

世优华冠以行业首创的IPCT模式为基础，对文旅新名片——功夫宝宝进行深度的开发。“功夫宝宝”憨萌可爱，十八般武艺样样精通，他骨子中流淌着中原人善良质朴、勇敢正直、乐于助人、热情好客的性格，始终用知足常乐的心态，通过制造快乐和传递好运给更多的人带去正能量！

未来世优华冠将围绕功夫宝宝品牌，进行大量创意内容开发，通过系列微内容在新媒体平台的传播，有效提升用户对品牌文化的认可度；同时持续在线下举办各种主题活动，进一步增强形象与受众的互动性，为公司持续创造经济价值，实现经济效益和社会效益的双丰收。

——公司简介——

世优科技是领先的虚拟技术提供商，公司专注于实时虚拟技术的研发与应用。自主研发的Puppeteer虚拟工厂系统是国内首创（2012年）的实时&快速虚拟内容制作、虚拟IP打造平台，在实时数字人和快速动画制作领域在国内外处于领先水平。

公司主要业务是为B端客户提供软硬件系统产品和技术制作服务，主要客户行业为：广电、互联网短视频/直播、公关广告营销、线上教育、影视动画等。

广电行业典型案例如：历年央视春晚的虚拟技术支撑及服务（2021年春晚刘德华“牛起来”），凤凰卫视、东方卫视、湖南卫视、山东卫视、浙江卫视、广西卫视等也都采购或使用过世优科技技术服务。另外，为华为、小米、腾讯、百度、网易、京东、阿里、苏宁、海尔、TCL、欧莱雅等头部企业提供虚拟IP打造服务或相关产品。

2012年至今，实时IP库中已累计“复活”的虚拟IP形象近400只。

编辑：fqj