文章来源:IP蛋炒饭(id:IPCOOK) 作者:陈格雷

原文链接:中国虚拟偶像/虚拟人IP全扫描:黑科技篇



上周的虚拟人形象全扫描文章,获得非常强烈的反响,尤其最后极其详尽的虚拟偶像产业地图,是迄今为止最完整的收录,不少人觉得不够清晰,专门想办法找到我们,索要了更高清的图。


现在再接再励,推出第二篇《黑科技篇》,因为黑科技才是让虚拟人前进的驱动力,正在越来越酷炫,或者越来越简单,让虚拟偶像/虚拟人成为未来的基本。


先说一件很重要的事——前天,我和一位专注于营销数字化、做“私域流量”公众号的老朋友,一起走访了科特勒营销咨询的总部,聊到了科特勒最新的研究成果:营销5.0。


按科特勒咨询负责人的说法——

营销5.0的核心,

是科技+人文,

给营销带来重大新驱动。


这其中,“人文”和IP紧密相关,从内容营销到社交营销,从全新品牌打造到成熟品牌迭代更新,都离不开IP化的推动。


而“科技”是关键幕后推手,如果没有科技的变革,让过去彼此分离的商业经营与文创内容紧密结合起来,就谈不上营销和品牌的迭代。



先看上图的上侧,过去,企业的商业运营是商业运营和文创内容的联系,只是靠广告、公关等来结合。


再看上图的下侧,从现在到未来,由于黑科技的不断进步,商业运营和文创内容在明显融合,商业直接需要文创,文创也能直接结合商业。


这也是我一定要撰写本文的原因:知道黑科技有多黑,才能知道商业+文化的融合力量有多强,未来的趋势在哪里……



虚拟偶像/虚拟人是借助新科技让商业经营与IP文创融合的显著代表。


TA可延展的场景极广,从泛娱乐偶像、零售带货、虚拟陪伴、教育培训、到文旅城镇、博物馆、影视制作等等。


下面逐一介绍虚拟人背后飞速发展的黑科技,以及带来的可能变革。


裸眼3D


这是阿里正在运用的工业级裸眼3D技术应用,而且会落地到场景:虚拟主播的线下直播间(同步线上开播),这样一来,就能将虚拟IP主播的空间,从线上到线下全部联动打通。


据雪爪文化(手心好物)的老徐介绍,已经将裸眼3D技术应用在品牌日的粉丝节活动中。


据说,达摩院的裸眼3D技术不同于传统动捕、全息或者后期制作技术,不再是现场主播只能通过小屏幕异位直播交互(虚假感较强,因为屏幕和现场真实体验不同),现在可以实时同步屏幕和现场,让同场真人主播或者明星的反馈更加实时真实,提升交互效果。


总之,裸眼3D技术肯定能让虚拟品牌主播的人设更加真实,实时互动更加生动,而且可以在未来打通虚拟主播、公关活动、虚拟偶像演出等各种应用。


千人千面


这是我在上篇文章已经提到的黑科技,也是阿里达摩院在研发的,通过AI人工智能的提升,结合淘系大数据基础上的专属算法,可以实现千人千面的交互,据雪爪文化的老徐说,现在已在淘系平台上进行初步应用。


千人千面的最直接好处,是让营销、卖货和服务都个性化、智能化,将大大提升虚拟IP的功能性。


将来,不管是大规模带货直播、还是客户售后服务,都能实现:同一个虚拟人对不同人的一对一人工智能交互。


AI无人直播间


阿里将在今年双十一期间在淘宝直播平台上进行运营,并开通商家。这样做最直接的效果,就是降低商家对超头部主播的依赖, 以及让品牌夜间直播时长提升,从两个角度同时实现商家ROI的增长。


这个也会结合前述的人工智能及千人千面的能力,更大提升直播带货的效率。


虚拟主播快速换装


虚拟主播快速换装IDOLstylist,特别适合应用在服装行业,从而将服装行业与虚拟偶像行业进行了交叉技术联合,也是很有趣的新技术。



其特点是能比现在虚拟主播缩短70%的全新换装时间,能够实时打造潮流虚拟主播和流行视觉,使虚拟偶像和明星虚拟化的应用广泛,尤其在时尚行业发挥出巨大力量,这一应用已经启动测试流程,年底前将亮相一些KA商家直播间。 


以上四项只是阿里运用黑科技的一部分,雪爪文化的老徐表示正在淘系平台上逐项开展,从而将虚拟人与购物的场景结合落地。


其实不只是阿里,其他大平台也在做各种准备和落地工作,下图是一些大平台的举措,图片来自经济观察网。



高仿真虚拟人


高仿真虚拟人是目前虚拟偶像产业的高端技术,也是最吸引眼球的,其创造的虚拟人的真实感和美感,特别能打动大众。这方面的技术代表包括国内的魔珐科技,以及来自国外的数字王国等。


魔珐科技一直在开发的是全栈式表演动画技术、超写实数字人全流程技术和智能虚拟交互数字人技术,既能实现离线内容,又能做到线上直播。


我在上一篇文章中曾介绍过高仿真虚拟人“翎”,这是魔珐科技和次世文化制作的、以动捕为基础的片子——


从片子可以看到,在动态捕捉和人物表情上,已经非常接近于真人演绎。


另一家高仿真虚拟人的技术流代表,是国际公司数字王国,其旗下的中国虚谷未来公司,最近推出了主打教育路线的高仿真虚拟人“小艾”——


从片子可以看到,用动捕制作的小艾短片,高写实感非常充足,基本不亚于传统动画,细节处理上也非常逼真。



据虚谷未来科技公司的唐总介绍,班长小艾应用了数字王国以Momentum为核心技术,能以超精细的虚拟动捕、追踪、互动技术,实现高精度即时动态视觉内容输出,特别是超高精度的眼球追踪,使得在进行面部捕捉时准确控制眼球动向成为可能,细微程度可以做到捕捉每一次眼球震颤;而最难处理的头发,也能让发丝随着重力感应呈现着相应的变化。


同时,小艾是可以轻量级运转的,目前班长小艾在直播的时候只需一台电脑、一部手机这样简单的设备便可以完成。


AI算法姿态


相比于前述的高端算法,下面介绍的AI算法没有那么高,却很实用。


比如,上一篇文章介绍过的二次元偶像NINICO,最大特点是动作妩媚,姿态可人,其后面的动作操作者(中之人)其实是动作直爽的男性,是通过算法使得动作自然变得妩媚的。


看看这段视频,一定想象不到这背后就是一个普通男生做到的,这就是AI算法的魅力。(我亲自试过,确实如此,我非常粗鲁的动作自动变成了NINICO的妩媚姿态)


让虚拟直播简单的黑科技


现在,虚拟偶像直播和离线动画内容,已经不需要有耗资昂贵的光学动捕,也能完成了,只要不是对仿真要求太高。


只需要有一个摄像头,就能完成尤其以面部表情和半身为主的动捕,这极大降低了虚拟偶像直播和内容制作的难度。


这是创幻科技做的肯德基大叔的实时直播,就是只需很简单的摄像头和动作捕捉器就能做到,无需进入昂贵的光学动漫棚。



这是中科深智做的萌芽熊直播,同样也是用很简单的设备就能完成。


这是在抖音上取得巨大成功的虚拟IP“不白吃”零食带货,非常受欢迎,其直播技术是由迈吉客科技提供的。


上述案例的最大特点是成本低,操作简单,完全能被广大公司所接受,使得虚拟人直播正在走向广泛的商业应用,这其实也是黑科技,让大众都能享受到的黑科技。


现在,创幻科技等公司还在不断研发更多简单、好用、实用的技术方案,从而让虚拟动捕动画能够更加普及。


声音的仿制和AI化


前面说的都是图像,现在必须讲讲声音和音乐。


声音的虚拟化、而非真人配音是重要趋势,这样可以让虚拟人真正拥有完整的虚拟创造。同时,虚拟音乐制造也正在兴起。


洛天依是众所周知使用YAMAHA的虚拟声音系统的,同时,洛天依还有一个虚拟音乐平台,在上面由网友们创造了成千上万首虚拟歌曲,让洛天依来演绎。


又比如,梁宁在得到上推出的《增长》课程,据说就是声音合成的自动文本转换,而无需专门有人配音……


所以,打造一个虚拟人,是可以从形象、动作到声音,都是用AI技术+大数据来完成的。


现在已经有一些平台能面向TO C,提供选择和完成虚拟声音的录制,比如在 搜狗AI开放平台。


逐步取代传统小动画


虚拟人的制作技术不只能应用到直播,还有一个非常重要的应用,就是能可以逐步取代传统小动画,甚至将来影响和改变大动画制作。


简而言之,用虚拟人技术来制作动画会很像真人影视制作,可以即时摄制很多条动捕视频,而且是即时生成,然后挑选出最好的一条,再进行后期修补。这就让动画制作不再以传统的一帧帧计算,能够快速生产大量素材,通过剪辑和后期合成完成。


以下是魔珐科技用新方式制作的动画片和广告片——


第一条是CROSS FIRE,在表现力和精度上,已经相当酷炫了。


第二条是广告片,也是用新技术完成,没有经过传统动画制作。


新的虚拟直播+即时动画的技术,已经运用在商业小短片和短视频上,会大大提升短片制作的效率。


替代影视制作


这是最高端的应用,就是用虚拟动捕技术和实时技术,直接应用到影视大片制作中,取代过去需要很多户外取景和大量后期特效才能完成的事。


利亚德公司的OptiTrack等光学动捕技术就是完成这个的,能同时用于实时摄像机跟踪、虚拟摄像机跟踪和虚拟现实系统,让很多顶级的电影和电视制作,也不再需要做那么多后期合成了。如果再加上高端小间距LED屏,就直接能取代很多户外拍摄,直接能在棚内完成高仿真场景。



猩球崛起、诛仙等电影,已经运用了新技术进行摄制。