与周杰伦同台献艺,虚拟偶像不断进化的背后究竟有哪些技术逻辑?


原始ACGx 2天前我要分享image.php?url=0Mrt4dFxNu

标题/RiCH BOOM

本文最初由ACGx创建。请说明来源。

技术是第一生产力

最近,虚拟偶像在中国非常火爆。

8月4日晚,2019年的Iqiyi呐喊夜音乐会北京站,爱奇艺原创潮流虚拟偶像品牌RiCH BOOM完成了首次全息舞台表演,此外还带来了新的最新歌曲《爆表》他们还与观众进行了互动。事件。几天前,我喜欢在6号和30号在上海举办生日派对;然后在7月19日在上海举行的BML-VR领域,虚拟偶像初音未来,乐天和B站。 22岁,33岁的常设母亲在同一个舞台上演唱了一场音乐会.

image.php?url=0Mrt4dotRz

由此我们可以清楚地看到,舞台上虚拟偶像的表演形式边界变得越来越广泛。

一方面,随着90后和00后年轻一代的成长,虚拟偶像具有很强的可塑性,人们不容易崩溃,并且也有强烈的粉丝诉求,开始在全球娱乐市场中脱颖而出;另一方面,各大娱乐巨头资源的不断增加也为这些虚拟偶像提供了前所未有的合作机会。市场环境的良好发展使虚拟偶像更容易发展。

从实际的性能效果来看,定位更趋向于趋势。爱奇艺推出的RiCH BOOM全息舞台首演表演与歌手形式的其他虚拟偶像不同。他们的表现更接近“偶像”的定义。从舞蹈到歌唱都有专业的安排和表演。除了从一开始就拥有高品质的3D人物造型和歌曲之外,几位成员的精湛表现与现实人士的表现一脉相承,这是近年来虚拟偶像制作技术不断发展的结果。

image.php?url=0Mrt4dPqxb

虚拟偶像制作技术的两个变化

从20世纪90年代虚拟偶像诞生之初,如何使这些二维人物变得越来越真实,已经成为许多从业者的方向。无论是叫“元祖虚拟偶像”《超时空要塞》林明梅,还是只在游戏CG《山脊赛车》永珍丽姿,他们都是通过2D,3D动画,让虚拟偶像的魅力成为曾经的主要景点之一或者卖点ACG的作品。

image.php?url=0Mrt4dn7XU

但是,由于当时的虚拟偶像只能依靠传统的动画制作人物,这既费时又经济,所以2000年以后,虚拟偶像的概念逐渐消退。事实上,虚拟偶像可以呈现出这样的生命力和活力,主要是因为市场后来经历了两次重要的转变。

第一次转移发生在2008年。

2008年2月,日本软件作者在场外发布了名为MikuMikuDance(MMD)的免费3D动画软件。顾名思义,该软件是为2007年推出的Hatsune Miku创建的。粉丝只需要通过简单的字符,手动K帧,渲染和软件中的其他步骤来模拟/修改字符。可以让这个虚拟偶像跳舞。

image.php?url=0Mrt4d2Tbh

由于MMD软件的普及,Hatsune Miku已逐渐从早期的官方地图或粉丝地图变为由许多P大师(即VOCALOID创作者)创作的视频作品。使用MMD进行歌舞表演。因此,初音未来将能够从音乐制作软件的拟人化形象转变为可以唱歌的虚拟歌手。

在交流交流交流AC交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流交流AC因此市场已经回归到大多数ACG爱好者的眼中。

八年后,虚拟偶像的制作迎来了一场新的革命。

2016年11月,Vtuber正式在网上发布了他的第一个视频。虽然虚拟锚是基于AI的,但实际情况是她在视频中所做的物理动作和面部表情变化,以及后来开始的偶像歌舞表演都是通过动作捕捉技术完成的。的。

image.php?url=0Mrt4d7bIN

基于计算机图形技术的发展,它在上世纪末的动作捕捉中很受欢迎。它广泛应用于电影电视,游戏,人体工程学研究,生物力学等诸多领域。简而言之,该技术的原理是使用相机等外部设备记录演员身体和面部标记的活动变化,并将其应用于3D角色建模。

image.php?url=0Mrt4dQAAt

尽管诸如《阿凡达》《猩球崛起》之类的好莱坞电影已经使许多观众的动作捕捉概念非常高,但在虚拟主播市场领域,有许多工具如MMD使用非常低的阈值。例如,facerig可以通过摄像头轻松捕捉到脸部,Customcast可以使用手机直接创建虚拟图像,而Live 3D这个国产软件也可以轻松实现虚拟锚和风扇之间的互动.

image.php?url=0Mrt4dTi56

确实,工具的普及使得化身的创建变得越来越简单,但是化身是否能成为“偶像”取决于幕后制作公司的PGC创作能力。我们可以看到初音未来,爱情MV和离线全息音乐会的实际表现总是高于UGC制作的虚拟人物的质量,更有可能被市场所关注。这对虚拟夫妇希望得到公众的关注,而高效率,专业的运营团队和方法实际上是必不可少的。

因此,MMD和动作捕捉等新兴生产方式总是依靠专业平台和公司依靠大量资源进行推广和推广。

游戏引擎的使用使虚拟偶像显示出更多的开发可能性

时间的发展到2019年,游戏引擎的成熟和实时渲染技术,虚拟偶像产业迎来了另一个转折点。以iQiyi推出的原始趋势虚拟偶像标签RiCH BOOM为例,依靠Unreal 4引擎进行角色创建 - 这是由Epic Games开发的游戏制作引擎,最大的特色就是“看到就是收入”。

近年来,全球动画产业掀起了使用虚幻4引擎制作3D动画的浪潮。与使用MAYA(或动画公司开发的专用引擎)的传统3D动画相比,用于建模,绑定,动画,材质,光照和渲染的一系列线性过程。虚幻4之间的最大区别在于动画过程是非线性的。生产者可以随时随地编辑和修改每个节点,并可以实时查看最终的成品。

image.php?url=0Mrt4dbR8K

2017年动画《Zafari》由虚幻4引擎

制作

换句话说,您只需要做一系列准备就可以实时创建高质量的3D动画。这种创造性的方式,用于创造虚拟偶像,可以被描述为“量身定制的”。

长期以来,在线进行虚拟偶像的方式通常是使用事先准备好的动画在全息舞台表演的现场进行的。这种方法的问题在于,为了确保节目的视觉效果,幕后团队需要大量的时间和精力来制作动画,并且难以在节目现场实时交互。然而,如果通过现场捕获进行交互,则难以保证虚拟偶像的特征的准确性,并且将大大降低实际性能。

由RiCH BOOM代表的新一代虚拟偶像是游戏技术与虚拟偶像创新融合的结果。一方面,动作捕捉技术允许虚拟偶像实时与观众互动,另一方面是虚幻4引擎的实时渲染功能,让RiCH BOOM不仅可以参加离线表演,还可以频繁参加登录iQiyi的自制品种。程序。

image.php?url=0Mrt4dkocQ

对大多数人的误解是,对于虚拟偶像而言,离线表演对于互动要求比参加综艺节目要求更高。一位业内人士告诉记者:“虚拟偶像音乐会的所谓互动主要是预先设计的剧本。相关的动画实际上是事先制作的。但对于综艺节目,如果你提前录制,现场要求经常会改变。最大的可能性是渲染渲染需要两到三个月的时间。因此,网站上的临时更改导致所有艰苦的工作都完成了,最终无法使用。“

硬币的另一面是技术的进步,给RiCH一个完全不同的孵化逻辑。 Hatsune Miku和罗天翼等传统虚拟偶像主要使用UGC让用户和粉丝贡献内容,不断丰富虚拟偶像的设置和形象。这当然允许每个粉丝参与偶像的发展,但同时使虚拟偶像缺乏神秘感。随着游戏引擎技术和实时渲染技术的成熟,虚拟偶像内容制作的门槛也相应提高,各种平台已经开始通过PGC改进自己的虚拟偶像的开发。

近年来,主流视频平台近年来开始向线下扩展影响力。今年,爱奇艺刚刚举办了2019年的爱奇艺VIP会员粉丝嘉年华,随后是一场尖叫的夜晚音乐会。这些丰富的线下活动正在成为虚拟偶像成长的土壤。艾奇伊副总裁杨晓轩公开表示:“在传统内容IP的孵化逻辑中,IP经常需要经历长时间的降水,而商业化过程中的转换率往往难以从时间成本中预测。 Qiyi对RiCH BOOM的孵化逻辑完全不同,基于平台优势的高识别图像和高平台曝光,可以实现快速的市场反馈和更多公认的商业价值。“

image.php?url=0Mrt4dCf7h

从早期的传统动画制作到新工具和技术的使用,虚拟偶像变得越来越重要,并在全球娱乐市场中发挥着越来越重要的作用。据说,爱奇艺仍在努力将人工智能技术与虚拟偶像相结合,真正为虚拟偶像“生命”提供理解,让他们能够理解并与人类语言交谈。这些新技术的使用为虚拟偶像制作技术带来了第三次革命。

本文为第一作者的原创,未经授权不得转载

收集报告投诉