虚拟现实技术在虚拟偶像开发中的价值探索

虚拟现实技术在虚拟偶像开发中的价值探索

单简 吕欣

中国传媒大学动画于数字艺术学院

【摘要】虚拟偶像的大热成为了兴起的新文化现象，其以二次元文化和动漫文化为受众文化基础的独特性质，使其给开发人员提供了崭新的创作视角尝试。本论文拟从作为虚拟偶像根本的三维技术底层逻辑出发，结合多年来虚拟偶像文化的发展，探索基于虚拟现实技术开发虚拟偶像的可能性。

【关键词】三维动画；虚拟偶像；虚拟现实技术

从传统虚拟歌姬初音未来在《甩葱歌》中敲开虚拟偶像新时代的大门，到由初音未来同人模型师创造的第一位vtuber绊爱，再到疫情时代钉哥钉妹双位出道守护最好的钉钉，逐渐出圈的“虚拟偶像”成功打破了次元壁进入到了我们的生活当中。而在新媒体环境与z时代的连接端口处，新的应用场景需求也在层出不穷。不限于手机电脑等传统平台，虚拟现实技术可为虚拟偶像提供更多的应用场景。虚拟现实技术的AR、VR、MR逐渐走入公众视野，虚拟偶像与虚拟现实技术结合的背后，提供给了消费者崭新的感官体验，为越来越多地为年轻观众们所接受和喜爱。

1. 虚拟偶像的技术基础

1.创作流程与三维动画相通

传统的虚拟偶像形象风格主要受到了初音未来的影响，初登场基本都以三维动漫人物形象出现。如陆续诞生的与初音未来类似的东方栀子、洛天依等虚拟歌姬。

近年国内更为流行的其实是b站上受到youtube影响诞生的“虚拟up主”（vup）。其投稿视频的角色动画虽然以二维可动模型的出演为主，但也与初音未来等虚拟偶像相同，都拥有由二维图像转化来的三维模型（如图1）。

虚拟偶像的三维模型也可以用于三维动画的创作，相当于使用了一个虚拟的角色，在搭建的场地中进行表演。这也基本说明了，虚拟偶像视频影像的制作流程在方法和目的上与三维动画制作流程基本相同。传统虚拟偶像影像的创作也在于让创作者使用虚拟偶像来再现自己心中想象的情景、满足自己的视觉需求。这也与在三维动画的制作时，导演可按照自己的心意进行动画的编排和影像的拍摄录制不谋而合。

于是虚拟偶像影像的创作流程与三维动画的创作流程互通，也为之后虚拟偶像成像的破壁奠定了坚实的基础。

图1

2.技术基础

虚拟偶像的直播需要使用引擎软件来驱动三维角色模型。以最近大火的CodeMiko为例（如图2），其使用的三维引擎为虚幻引擎（Unreal Engine 4）。该引擎可以实时模拟光线追踪及各种物理效果，试图给人以加乱真的真实感，拉近虚拟偶像和观众们的距离。

图2

使用二维模型的虚拟偶像在直播时通常选择使用的引擎为live2d，也可以通过虚拟摄像头实时捕捉真人的行为数据给虚拟角色，让虚拟偶像和真人保持相对一致的动作达到和观众们实时互动的效果。

不论是使用二维模型的虚拟偶像或是使用三维模型的虚拟偶像，都保持了模型角色动作数据后端通道的一致性，即已将虚拟角色内置的关键帧动作做成了相应的映射滑块。虽然接入了不同前端，但真人动作数据识别后角色后给出的反馈都是已知的数据通道。

2. 虚拟偶像中的虚拟现实技术应用情景

虚拟现实技术包括vr，还有ar和mr等等。

1.VRchat（vr交友软件）

VR中对于模型的实时控制也是使用预设的通道进行的。

因此除了使用电脑手机等平台搭载的动捕直播软件外，也涌现了不少使用VRchat进行直播的虚拟偶像。

在VRchat中用户可将带有动作通道的模型上传至个人中心。只要接上显示器，用户戴上头盔进入VRchat后，便可以完成和该角色模型的同步，实时直播该角色的一举一动，再推流至直播社交平台，便可以进行虚拟偶像的直播（如图3）

图3

VR交友软件的无心之举，让虚拟偶像与虚拟现实技术的交汇更加紧密。

2.多媒体虚拟偶像企划中的AR应用

AR技术与虚拟偶像的结合，常见于二维码扫描跳转，或是以游戏为接口的虚拟偶像多媒体偶像企划。

经典的虚拟偶像手游如《lovelive》、《bangdream》和《偶像梦幻祭》可以让玩家能切实感受偶像团体养成的成就感，广受好评。中国也有模仿诞生过类似的偶像企划，如《战斗吧歌姬！》。

这种多媒体偶像企划，在周边物料宣传中会推出许多扫描会员卡获得收藏影像的AR影像服务，或者从手机中看到在卡片上隐藏的动漫角色的宣传物料（如图4）。如同开盲盒一般带给玩家新鲜感，可以保持游戏玩家的稳定性，正向反馈增加虚拟偶像团体自身真实的生命力和粉丝粘度。

图4

3.AR虚拟偶像直播

虽说使用AR本身的成像技术概念与虚拟偶像结合的案例还是较少，但在抖音和快手等短视频直播平台中，有不少使用AR技术，利用手机自带摄像头来实现虚拟偶像面部捕捉的情况。

该种直播方式给许多没有经验去使用专业带有通道的三维模型和复杂的电脑三维引擎的人提供了使用虚拟形象进行直播的机会。仅是使用手机前置摄像头进行面部捕捉，便可以控制屏幕中的虚拟偶像（如图5）。

图5

4.演唱会中的AR

在2021年的春节联欢会上，洛天依与王源和月亮姐姐联合出演了歌唱节目《听我说》，这是洛天依首次出演面向全国观众的节目（如图6）。其特效之精美、AR应用之巧妙成为AR演出的标杆之作……在电视机前甚至可以清晰看到现场和现实融合在一起的本来并不存在的洛天依的投影、倒影、反射等光效，可见实时特效合成的精细程度。

图6

三、虚拟现实与虚拟偶像结合的长期性

1.交互性强、用户体验丰富

虚拟偶像是一种要求强互动的文化产品，需要给观众带去不断的视觉享受和感官刺激。现代文娱作品也不仅受限于现实生活中可实现的表达，现在也更需要可以给人更多体验的虚拟向作品。虚拟偶像与虚拟现实技术的结合便是符合这项需求的潮流趋势产品。沉浸式的全新体验，或许智能在虚拟现实技术中才能获得。

2.国内动漫娱乐多元化

中国动漫产业蓬勃发展，带动虚拟偶像之类原本边缘产业的发展。在虚拟偶像的开发中，研究使用新的虚拟现实引擎技术反向作用于三维动画，大大缩减了动画工期成本突破三维动画技术难题，实现动画新的可能性。正好赶上b站快手抖音短视频的风口，满足了国内人们对于多元化娱乐方式的需求。人们不再是只关注原本一板一眼的传统三维动画，实时直播互动的虚拟偶像ip和动作捕捉虚拟角色短视频也是独树一帜，且触手可得、接地气。

3.促进虚拟现实研发

虚拟在破壁，或许在对虚拟偶像深入的研究中，不久的未来我们可以在虚拟现实引擎的模拟下，用手真实摸到虚拟的事物，或者让虚拟的事物真实地存在于现实世界。积极参与研究是大势所趋，势必可以给人们带去更多的便利和可能性。

如AR直播技术还常见于直播带货，给人们新的视觉体验。通过手机进行简单的图像识别的动捕方式更加简洁，虽然控制的模型往往是低模，但也大大改善了人们在虚拟偶像方面对AR的需求量。且也不限于虚拟偶像，像AR滤镜等，也让AR与虚拟角色的融合让人的接受度更高了（如图7）。

图7

四、总结与反思

时至今日，虚拟偶像的定义早已不再如往日般单纯了。不同于以往粗制滥造的三维画面，现在是模拟还原现实环境的引擎技术；不同于往日的视频垂直内容，现在流行vup实时直播聊天；在虚拟现实技术的积极推动下，虚拟偶像不同于原本小小的一隅角落，现在像是连接虚拟和现实的桥梁。优秀的虚拟偶像还可以带来积极的引导，为虚拟现实技术带去生机。

然而虚拟现实技术和虚拟偶像文化仍只属于小众文化。比如虚拟现实技术的VR在设备的穿戴上仍有很多局限性，虚拟偶像的受众群体也仅仅在动漫人群中较多。期待未来更多的为虚拟偶像产业服务的手机端VR软件的出现。

希望虚拟偶像们的优秀表现，可以实现对引擎虚拟现实模拟技术上枷锁的破除，成为开发创新的不竭源泉；虚拟现实技术也能给虚拟偶像提供新的成像体验。

五、参考文献

[1] 袁梦倩：《赛博人与虚拟偶像的交互:后人类时代的跨媒介艺术,技术与身体——以虚拟偶像"初音未来"的传播实践为例》 [J]，《媒介批评》2019年第0期第70-79页。

[2]袁萍：《AR/VR技术在动漫产业中的运用与艺术价值研究》[J]，《美丽中国》2018年第42期第232-233页。

[3] 邹湘军, 孙健, 何汉武, 郑德涛, 陈新：《虚拟现实技术的演变发展与展望》[J]，《系统仿真学报》2004年第9期第1905-1909页。.

[4]战泓玮：《网络虚拟偶像及粉丝群体认同建构》[J]，《青年记者》2019年第11期第7-8页。

[5]喻国明，耿晓梦：《试论人工智能时代虚拟偶像的技术赋能与拟象解构》[N]，《上海交通大学学报(哲学社会科学版) 》2020年第131期第29-36页。

[6]邓国军：《浅析三维动画与虚拟现实技术》[J]，《计算机产品与流通》2017年第12期