• QQ空间
  • 回复
  • 收藏

专注移动端AR+AI动捕技术,「与愿科技」想让C端用户参与虚拟IP打造

东方头条 2019-11-28 12:46:47 科技

2007年日本虚拟偶像初音未来的诞生揭开了虚拟偶像产业的序幕。国内首位虚拟歌手洛天依出现于2012年,截止到目前,洛天依微博粉丝已经超过450万,并为雀巢、百雀羚、必胜客、美年达等多个知名品牌代言。虚拟偶像能给予粉丝更高的参与度,其更稳定的人设也带给粉丝更多安全感。

随着屏幕技术的发展,虚拟IP的展示方式也在向3D进化。由震惊文化孵化的3D虚拟IP“猪小屁”抖音播放量已超24亿,微信表情包使用量超过9亿;快手孵化的3D虚拟主播“一禅小和尚”粉丝量级已达五千万,位列素人账号第一。与此同时,虚拟IP经济的发展也在倒逼制作技术升级。

传统的3D虚拟IP制作以CG视频为主,依赖人工且耗时长。随着实时角色动作捕捉技术的逐步成熟,市场涌现了魔珐科技等利用AI主机端动捕技术来制作3D虚拟形象的公司。不过由于动捕技术成本较高,目前虚拟IP制作仍然以服务B端客户为主,如影视动画、番剧、游戏和虚拟偶像等内容制作公司。

在UGC内容日益增长的今天,怎样赋能普通C端用户进行虚拟形象的创作和传播会逐渐成为技术发展的方向。36氪近期获悉,一家名为与愿科技Techreate的初创公司正在着力打造适用于手机端的3D虚拟形象制作开发工具。

与愿科技成立于2018年,主要基于实时3D交互、即时动捕等技术搭建3D虚拟IP手机端开发平台。目前公司基于移动端摄像头即时动态捕捉技术实现了表情、身体动作数据采样,可将真人动作和表情实时融合进虚拟角色。与愿科技自主开发的3D虚拟IP软妹宝已在测试阶段。

虚拟IP“软妹宝”

与愿科技的制作流程主要分为四步:1)创意角色设定2)CG角色3D交互模型和材质制作3)实时3D模型骨骼绑定,面部Blendshapes表情制作4)实时互动角色动画制作。与愿自主研发的实时互动角色动画制作流程取代了传统制作中的CG动画、渲染等环节。CEO施运忠透露,与愿科技的制作效率相较传统流程提高了近12倍,其虚拟IP软妹宝运营成本也仅为传统虚拟IP形象的三分之一。

与愿科技希望将虚拟IP制作技术渗透到C端,通过App等方式让普通手机端用户可以一键创作虚拟IP并以UGC视频/图片的方式传播。这种方式也可以理解为基于AI算法让手机摄像头具备视觉感知和动作捕捉能力,用手机摄像头替代专门的动捕设备来实现真人对虚拟IP的驱动。与愿科技CTO陈超表示,目前已经实现了高端苹果手机的虚拟IP生成,未来会逐步将技术兼容到更多其他手机机型。当然,这也与手机硬件是否支持相应运算处理能力有关。另一方面,随着5G的发展,云端运算的实现有望降低对手机终端的要求从而加快技术落地。

鉴于算法和手机硬件本身的发展,与愿科技CTO陈超预计手机端虚拟IP制作工具的普及还需要1-2年的时间。在C端需求爆发前,与愿目前主要为B端用户,如短视频领域MCN机构等,定制3D虚拟IP。虚拟IP初始制作费用在十几万人民币水平,后续如果参与视频运营,则以视频条数为准再加收运营费。

值得一提的是,为了提高IP制作效率,与愿科技自主打造了视频处理算法,即可以通过客户录制的视频直接进行3D动作数据采集生成,省去了由真人穿着动捕设备动作采集的环节。整个视频处理过程只需要十几分钟。除了短视频MCN机构,与愿科技的CEO施运忠表示,其他有人物出境需求的行业,比如教育培训机构、金融服务机构等,都存在虚拟IP的制作需求,目前已有客户在洽谈中。

虚拟IP可以在完全虚拟的场景中使用,比如动画片拍摄,也可以通过混合现实技术与真实环境相结合。在与愿科技团队看来,随着MR技术的发展,虚拟IP的混合现实端对C端用户有更大的吸引力。CEO施运忠还强调目前与愿输出的产品以制作工具为主,未来希望围绕混合现实端的虚拟IP进行更全面的生态开发。

公司目前已经开放天使轮融资,团队在接洽投资机构中。