随着三维信息技术的出现,让“造人”成为可能。
魔珐,一家在虚拟世界创造“人”的科技企业,通过全栈式端到端AI表演动画、人工智能虚拟角色直播互动、全智能虚拟数字人等的产品技术,实现虚拟世界的内容制作、虚拟IP打造、全智能虚拟数字人的应用与布局。
在2019年11月8日的记者节中,魔珐制作的超写实虚拟数字人Ada惊艳亮相,现场充当起虚拟主持人,与获奖的记者们进行实时交流互动,和真人主播不同,虚拟主播可以突破人类的技能限制,做出真人无法做到的动作或者表演。
“如果虚拟世界是现实世界的镜像,那么虚拟数字人就是现实人的镜像。”
在传统动画的生产模式下,动画后期需要人工精雕细琢,往往造成产能不足和阶段性过剩的问题。举例来说,一位娴熟的动画师一天大约可以生产 1 秒钟高质量 3D 动画视频,每修改一个镜头需要数万元成本,数日的多工种配合赶工。在公司经营层面,存在为了承接大型影视制作项目扩招制作团队,交付后团队过剩不能满负荷运转,从而导致裁员或是人力成本过高而拖垮公司的问题。
基于动画市场中的痛点,比如影视动画、游戏等行业公司的“虚拟化”需求,魔珐自主研发的全栈式端到端AI表演动画技术及智能建模、智能绑定、集群渲染技术,就能实现高效、高质量、实时的3D动画输出。
虚拟数字人形象
表演动画只是魔珐打造“虚拟数字人+X”生态的一个切入点,泛娱乐行业内容制作、虚拟IP打造及全智能虚拟数字人的全行业应用才是魔珐所聚焦的,从而达到赋能虚拟数字人应用于多行业,在时间成本和效率上实现全面提升。“魔珐以全栈式端对端AI表演动画为切入口,产品与应用正在延伸,以泛娱乐内容制作、虚拟IP打造及全智能虚拟数字人应用为核心,赋能虚拟数字人生态,围绕虚拟数字人的内容为各行各业提供内容及运营服务。”
作为虚拟世界的一部分,虚拟数字人技术是人们的助手,丰富线上线下数字文化形式,提供信息服务,兼顾软硬件角色。
作为第一个吃“螃蟹”的人,魔珐在技术研发上也并非顺风顺水。“首先,从算法研究到工程落地再到产品使用,算法工程跟产品结合是一个漫长的磨合过程,通过软硬件不断调试之后,才能精确地使用。此外,场景落地后的技术优化、迭代也是巨大挑战。”魔珐科技CEO柴金祥说。
魔珐科技CEO柴金祥
基于此,魔珐推出全栈式端对端AI表演动画解决方案,包含了高质量实时表演捕捉、三维动画驱动技术、真人CG虚拟数字人三大核心技术模块,来为虚拟角色实现超高质量的呈现和互动,核心技术能力包括:
能够同时支持多人的表情、眼神、肢体动作、手势、道具等高质量的三维捕捉。
通过三维计算机视觉技术,自动身体三维建模和骨骼标定,自动面部三维建模,后期无需动画师手动处理大量数据。
能够自动处理多人运动捕捉遇到的严重遮挡问题,具有运动捕捉故障自动检测和快速自动恢复能力。
基于原创运动重定向技术,实时、在线驱动任意虚拟角色,包括真人CG、二次元、虚拟主播。
“在不同的场景下,直播需要的技术是不同的,实时动画技术要求纯粹的离线制作,我们在原来的表演动画基础上做成实时动画再加入渲染,所以需要做端对端的输出。比如在直播中,我们可以提前策划好内容,然后只需要有一个真人在后面表演就行了,同时进行实时推流,不用考虑地域性带来的局限。”柴金祥介绍。
AI表演动画,真人驱动表演
对于魔珐而言,技术上全栈式能力成为关键,从最初的能表演、有形象、能说话的技术,到现在技术可以做到虚拟数字人能被我们看到、也能看到再到垂直行业的多场景应用,并能打造虚拟KOL、虚拟直播、虚拟短视频等业务产品。比如可以与用户实时互动的虚拟雇员、客服,放入银行场景中,为顾客提供线上线下咨询服务。
柴金祥表示:“魔珐的目标是虚拟数字人+X生态的打造者,并不仅仅是虚拟世界的表演动画,而是希望对行业实现革新,我们要做的是改变行业传统认知,用AI虚拟数字人更好地服务各行各业、赋能行业,创造出真正的虚拟数字人的服务价值。”
虚拟IP的好处在于生命无限、能量无限、智慧无限、边界无限。虚拟IP可能会比真人IP市场空间更大,现在的很多承载的方式,例如AR/VR眼镜、线下全息环幕已经在为其做准备。
同时,魔珐科技已经和《王者荣耀》合作制作了百里守约代言的Meco果汁茶广告。腾讯、网易、字节跳动、百度等头部互联网公司也均与魔珐科技开展了一系列的合作。在全智能虚拟数字人方面,魔珐科技则更倾向于和行业客户进行合作,比如光大银行、南京银行等。
魔珐和腾讯王者荣耀合作
在柴金祥看来,在影视动画、游戏行业等已有的庞大存量市场,传统动画的制作耗时非常长,而利用魔珐科技提供的全栈式端到端AI表演动画技术以及智能建模、智能绑定、集群渲染等技术,用表演的形式制作动画,极大提高了质量和效率,降低了制作成本。
“值得一提的是建模效率至少能够提高10倍。如果(传统的建模技术)没有很大提升,那这个效率在半年后会提高到20—30倍。”
柴金祥认为,虚拟世界的发展会分为三个阶段:标杆阶段、规模化阶段、成熟阶段。
未来一年里,行业会出现足以给所有人带来信心的商业化标杆。之后,虚拟数字人会逐渐在各个行业形成规模化的发展。“当有一天行业内最有名的明星也有一部分是虚拟数字人,那行业就真的成熟了”。
魔珐科技致力打造一个连接产业、活化文化、丰富人们生活的AI虚拟数字人生态体系。
基于5G底层设备和设施的逐步完善,基于人工智能技术发展和人们对于虚拟世界理解的深入,魔珐对于推动产业的发展有很清晰的愿景:希望用虚拟制作技术赋能行业,带动产业效能与认知的提升。
发现未来独角兽,项目BP发过来!
如果你的项目足够优秀,希望得到36氪浙江的报道,参加36氪浙江的“未来独角兽活动”,请将你的需求和BP发至36氪浙江项目征集邮箱:zhejiang@36kr.com,我们会及时回复。
36氪浙江——让浙江创业者先看到未来 !