编辑|周天巧(三川汇文旅体研究院助理研究员)
〇、本文主要结构试图探讨哪些问题
一、什么是虚拟偶像分类
二、行业概况
三、行业发展历程
20世纪60-90年代
1990年-2000年
2000年-2019年
2020年-现在
四、产业链商业模式
五、虚拟偶像需要哪些技术基础?
六、行业驱动因素展望未来
虚拟偶像兴起有哪些社会因素?
复盘虚拟偶像IP的成功,有哪些必备条件?
展望:从重人力投入到AI驱动的未来
难点在哪里?
一、什么是虚拟偶像
虚拟偶像(通常用于泛娱乐行业)是通过绘画、动画、CG等形式制作,在互联网等虚拟场景或现实场景进行歌手、乐队等活动,以商业、文化等具体需求制作培养,但本身并不以实体形式存在的人物形象。
如果再细分,我们把虚拟偶像(虚拟娱乐业面向大众的主体)再进行区分,大致包括以下几类:
虚拟偶像团体,通常以乐队、组合的形式出现,并以单曲和专辑形式,进行舞台演出:早期的鼠来宝,后期RiotGames在英雄联推出的虚拟K-pop组合K/DA都是虚拟乐队/团体的例子。
最早可追溯到90年代《心跳回忆》中的藤崎诗织,她在游戏大红之后,也独立发行了单曲。"恋与制作人"四个男主角的成功商业化,也是虚拟偶像在游戏业的成功案例,李泽言等偶像已经成为多种产品的品牌大使,并相继出现在电视真人秀节目中。
虚拟主播(Vtuber,原指Youtube平台上的虚拟主播)主要指使用数字人身份,在流媒体平台上进行直播的博主。目前的范围并不局限于油管平台。知名的例子有KizunaAI或BarbieVlogger。
根据iiMediaResearch的数据显示,2020年中国虚拟偶像核心市场规模为34.6亿元,预计2021年将达到62.2亿元。
根据头豹研究院预测,虚拟偶像市场规模在2025年将超过50亿元。
除此以外,我们还可以看一下初音未来的数据:自2007出道以来,初音未来在全球的营收超过1.2亿美元,出品曲目超过100,000首。
△上图:初音未来
复盘行业历史可以窥见行业发展的脉络:我们就来看上世纪六十年代到现在的虚拟偶像发展历程。
虽然虚拟偶像行业听起来比较新潮,然而,早在20世纪50年代,类似的模式和概念就被提到过:1958年,美国动画制作人RossBagdasarian就制作了名为《AlvinandtheChipmunks》(又译作鼠来宝)的虚拟乐队;片中的三只老鼠乐队成员分别叫:Alvin,Simon,andTheodore,鼠来宝乐队成为史上最成功的儿童艺术家之一,单曲《ChristmasDon'tBeLate)》在BillboardHot100两次成为冠军单曲,获得五项格莱美奖,实体唱片销量达到500万张,2015年,鼠来宝系列电影第四部上映。
几年后,1961年,贝尔实验室的三名工程师通过写代码,让大型计算机IBM7094“唱”了一段"Daisybell"之歌,这开启了计算机和虚拟人物进行技术结合的科技窗口。
1967年,虚拟乐队TheArchies出现,一时风靡美国,由DonKirshner制作,首次出现在漫画书LifewithArchie第60回中。
△图片:TheArchies乐队源于Wiki百科
哪怕在几十年后的今天,鼠来宝和TheArchies乐队仍时不时活跃在新的电影和电视节目中。
这个时期的突出特点是:虚拟角色有剧本,有制作人,通过动漫的模式和场景,从电视作为最初的营销媒介,又以音乐为载体,通过爆款的流行单曲,将虚拟角色扩散到流行文化。
进入20世纪80年代,日本迈入了数码新时代,微型计算机不断发展,1983年更是公认的红白机元年,从这个时候开始,“宅”文化逐渐形成,动画同人杂志的数量以惊人的势头增长:日本现象级动漫《超时空要塞》的女主角—偶像歌手林明美(LynnMinmay),是当时最红的存在。之后,官方以林明美的名义将超时空要塞中的插曲,做成偶像专辑发售,打进了Oricoon音乐榜单前几名。
△lynnfrommacross:Pinterest
△图片:Magazone23源于Wiki百科
这个阶段还是以动漫为载体,以出专辑为主要运营模式。虚拟偶像可以在不同的流行文化背景和消费群体下,在保留形象的基础上,不断地重新革新风格和曲风,以适应现代音乐的发展。
进入20世纪90年代,技术条件的革新,给虚拟偶像的创造环境提供了土壤:1990年,工程师Christian和PhilipLosch应用渲染光线追踪器参加了Kickstart杂志主办的每月编程比赛,并且获奖。
1991年,FastRay(Cinema4D软件的原名)在Amiga正式发布;
1990年,以图形设计、动画、渲染而闻名的AdobePhotoshop正式发布;
1993年,后期制作软件AdobeAfterEffects发布.
1994年,免费软件Blender发布(知名电影《美国队长》《Annabelle:Creation》《神奇女侠》等都是用了Blender)。
1994年,虚拟乐队FIREBOMBER出现在动画超时空要塞TV作品中,FIREBOMBER是一支流行乐队,以单曲《PLANETDANCE》出道,同年6月发行首张专辑《LET'SFIRE!!》
1994年,游戏产业的发展,给很多虚拟偶像的大火提供了土壤。
经典游戏《心跳回忆》中的女主角藤崎诗织(ShioriFujisak)是很多人的童年女神,在游戏中,如果想和藤崎诗织交往,玩家必须努力提高自己的属性。
因此,藤崎诗织在《心跳回忆》中是一个BOSS级的人物。但在那个很难找到游戏攻略的年代,很多玩家为了达到想要的结果,必须一遍一遍地反复尝试,这种尝试让很多玩家对她产生了很深厚的感情。而后,科乐美公司设立了藤崎诗织的的官方后援会,共发行官方季刊33期,而藤崎诗织也以虚拟偶像的名义独立发布了数张专辑。
1996年,为了纪念公司成立35周年,日本娱乐公司Horipro开发了3D虚拟偶像伊达杏子(KyokoDate),这也是一个非常值得研究的案例:约为50名技术人员参与了开发伊达杏子,出道后,她还发过一张激光唱片《LoveCommunication》整个项目初始投资约为数十万美元,动作形象是通过动作捕捉技术制作的,由美国舞者录制,但是由于各种条件的限制,制作成本非常高,单次舞台亮相就要花费数万美元,尽管Horipro公司对伊达杏子抱有很大的希望,但是并未在商业上大获成功。
△图片:伊达杏子源于Wiki百科
伊达杏子为什么没有成功?
日本的虚拟偶像潮流很快扩散到了韩国。
在西方,另类文化和流行电子风的发展促成了新兴曲风虚拟乐队的兴起:1998年英国的Gorillaz乐队由四个虚拟偶像组成,由知名漫画制作人JamieHewlett和Blur主唱DamonAlbarn联合创作。
乐队成员包括:主唱ChakaKhan、吉他手Noodle、团长/贝斯手Murdoc、鼓手Russel。乐队的音乐风格中融入了新方式,标志性的"zombiehiphop"曲风吸引了90年代的人。动画音乐MTV延伸了Gorillaz乐队的虚拟世界,向新一代重新介绍了基于角色的音乐表演的概念。
技术进步:Vocaloid软件横空出世
2000年代,技术环境再次升级:在雅马哈公司的资助下,西班牙PompeuFabra大学的研究员HidekiKenmochi,开发了语音合成软件"Vocaloid",普通用户可以用软件创建一个栩栩如生的、具有音乐会质量的声音的"电脑合成歌手",Vocaloid可以将语言分解成音素,即语言中最小的音素成分。
然后,由人类歌手或配音演员提供声音样本,储存在数据库中。通过Vocaloid软件,用户能够检索音素,并按照选择的任何特定的节奏和旋律重新排列,形成完整句子。
本质上,Vocaloid营造了“desktopmusic”"的发展环境。
2000年,雅马哈公司正式以商业化的形式发布了Vocaloid软件。
2007年,VOCALOID2正式发行。这是一款以语音合成程序为基础开发的音源库,音源数据资料采样于日本声优藤田咲。就是在这样的基础上,虚拟偶像歌手——电子歌姬初音未来应运而生。
2007年,现象级虚拟偶像初音未来出道,成为了时代现象级的虚拟偶像,由日本CRYPTONFUTUREMEDIA公司发行,初音未来的成功商业化,亦是虚拟偶像整个行业发展的里程碑。
数据显示,初音未来的热度在推出后还在持续上升:2010年雅马哈公司在日本的一项调查表明,初音未来在人群中的知名度约为60%,而2013年东京理工大学在调查表明,这一数字上升为95%。
那么,初音未来为什么能成功?
对于初音未来到底是如何成功的,很多专家学者也做出过解释:
首先是先发优势,初音未来完全具备“偶像的灵魂”。在当时,初音未来的配音质量是最高的,她的表情和形象的生动程度,都超过了以往的任何角色,在行业具备绝对的先发优势。
其次是开源模式:初音未来的推出,依托Vocaloid软件,Vocaloid的本质,其实是音乐人用来作曲的工具,但是这个工具却有一个二次元化身。不是所有的Vocaloid用户都喜欢相同类型的音乐,但大家都可以使用Vocaloid这个软件。
△2018年,伦敦初音未来演唱会,座无虚席
最后是文化上,"初音未来"的现象级成功与日本同人文化的土壤密不可分。
什么是同人?
虚拟偶像商业化需要注意什么?
形象创新要慎重
问题出在哪里?
本土虚拟偶像:中国第一虚拟歌姬:洛天依
2012年3月22日,洛天依的形象设计首次公布,上海禾念信息科技有限公司以YAMAHA的VOCALOID3语音合成引擎为基础,制作了全世界首款VOCALOID中文声库和虚拟形象,同样,广大锦依卫具备了调教“洛天依”的基础。
△2019年,钢琴家郎朗与15岁的虚拟偶像洛天依同台演出
新社交媒体的兴起:虚拟网红博主逐渐出现
2016年,随着社交网络的兴起,虚拟偶像LilMiquela首次发布在instgram。团队为她在现实世界中设定的真名为MiquelaSousa,是一位住在洛杉矶的20岁巴西和西班牙的混血女孩,职业为模特和歌手。她拥有一定的自我意识,例如,她会在社交网络上支持黑人维权,并曾公开表达对川普的厌恶。
随着新一代选秀节目在国内兴起,虚拟偶像也逐渐进入了选秀场景。
2017中国的虚拟偶像:荷兹HeZ,在腾讯出品的《明日之子》魔音赛道初次亮相。
而基于游戏的韩风女团,K/DA的成功也十分值得研究:
2018年,由英雄联盟旗下的RiotGames公司开发的K-POP流行女子虚拟偶像组合K/DA在当年的英雄联盟世界锦标赛上亮相,并发布第一首歌:"Pop/Star”,以AR的模式进行现场表演,油管的月观看次数马上超过了100万。
K/DA虚拟偶像组合的运营的成功之处在哪?
从人物设定上,K/DA的制作团队,将每个组合角色赋予了不同的性格,每个角色都有一个明确原型,观众就可以轻松识别他们最喜欢的K/DA成员。在打造K/DA组合之前,团队充分做了调研,他们发现,流行团体往往有一个公式,每个成员都有自己独特的个性和风格。一个组合里,需要有领导者、害羞的角色、不羁的性格等。
为了确保设计的角色性格各异,单曲"Pop/Stars"的编写也考虑到了组合的特色。例如,在歌曲中加入了说唱部分,K/DA中的Akali的设定是一个Rapper,而前段和声设定由Ahri演唱。
而后,虚拟偶像又逐渐拓展到时尚界:
Ins虚拟名媛模特:NoonoouriImma
2018年2月,Noonoouri在纽约时装周期期间,入驻Instagram,之后获得了众多世界大牌和知名设计师的一众加持,包括Dior设计师、名模NaomiCampbell和KimKardashian-West的设计师,模特和名人的认可。后续她签约杂志的封面模特:《VogueMe》和《GlamourBrazil》
2019年初的巴黎时装周,Imma作为虚拟模特出现在2019年1月的巴黎时装周上,她的基本设定:有一定艺术鉴赏力,生活偏向潮范儿,是一个时尚独立的都市女生。
国际大牌逐渐开始推出自己品牌的虚拟偶像:
2019年6月,知名护肤品牌SK-II在戛纳宣布,和AI公司SoulMachines合作共创的SK-II的首个品牌虚拟偶像代言人YUMI。YUMI以谷歌的Dialogflow作为自然语言平台,可以为消费者提供护肤建议。
△虚拟偶像Yumi源于:SK2官网
古风少女虚拟偶像:2020年,在《上线吧!华彩少年》节目中,古风虚拟偶像翎Ling正式推出,她的设定是一位热爱国风文化的女生,非常有国风感,面容也富于东方特色。2021年,翎Ling作为国风虚拟偶像的代表,登上了《VOGUEME》2021开年刊。
△虚拟偶像翎Ling图片源于官方微博
2020年,字节跳动和乐华娱乐打造了名为A-SOUL虚拟偶像女团,发行团体第一张单曲《Quiet》,12月11日,进行了第一场线上直播。2021年4月30日,发布第二张单曲《超级敏感》
△虚拟偶像A-Soul图片源于百度
10月,韩国娱乐公司SMEntertainment推出了他们的新偶像女子组合aespa,不过和以上的完全虚拟的设定不同,其概念结合了现实生活中的成员和虚拟成员。Aespa涉及“存在于现实世界中的艺术家成员和存在于虚拟世界中的化身成员,它们通过数字世界(现实与虚拟之间的空间)‘互动和交流’。
2020年,B站推出首档虚拟偶像养成类型综艺《虚拟人成材计划》,在节目里,童和光、Soda成为了“养成”的主角,他们要在PD白术和六位知名UP主的指导下,学习如何成为一名“有用之才”。
2021年,正值元宇宙概念大火之际,Ayayi作为一个在国内目前阶段,皮肤和质感都较为写实的虚拟偶像,正式出道。520当天,AYAYI在小红书发布了首篇笔记,阅读量马上过百万,账户一夜涨粉近4万。
复盘完几十年以来主流的虚拟偶像,我们会发现,新一代虚拟偶像或多或少都会继承之前虚拟偶像的无论是技术、亦或是设定元素,再加以改进。
虚拟偶像的制作离不开技术的支持,包括设备、软件、建模师和画师需要协作,才能将虚拟偶像推向市场之前的Demo初步打磨出来,对虚拟偶像皮肤、真实程度和渲染的要求会直接决定这部分的资金投入水平。
而中游主要包括推出虚拟偶像的平台(公司)和个人,这块主要是以运营为主,公司会给虚拟偶像IP进行设定和量身打造。
五、虚拟偶像需要哪些技术基础
从技术上说,只要设计出符合偶像设定的3d模型,再配上动作捕捉设备,就可构建简单的虚拟偶像。大部分游戏的虚拟主播主要是采用面部捕捉。制作一个3D角色对于游戏和影视特效师来说,并不是新鲜事。
每年,数字角色的技术和工具都在不断创新。对特效和3D建模、游戏从业人员来说,多数"虚拟偶像"都是按照标准3D制作流程,应用Maya或Blender等建模工具完成的。
△虚拟主播的简单制作和实时表面捕捉软件Facerig
通常情况下,单个工程师就可以独立构建虚拟偶像网红,而一个3D电影角色,通常需要几十个团队使用高端专业软件。普通的虚拟网红只要使用角色模型库,例如DAZ,直接进行转换,只要修改或添加头部模型数据即可。
当然,技术人员也可以通过ReallusionIclone等软件,应用官方预先配置的工具集,快速创建角色,定制修改,完成细节调整:很多小型工作室的虚拟偶像看起来极为相似,当然很多时候是因为创作团队也想小范围进行快速测试,面向市场迭代。
但是,不同精度3D建模和动作捕捉设备成本差异非常大。主要制作流程是:首先应用建模工具进行3D建模(可以理解为游戏里的捏脸)—然后用动作捕捉设备,驱动人物模型动作,加以迭代—在辅以配音“中之人”。
什么是中之人?
只是角色配音,但却不以真面目示人。这个特征类似于特摄片中的皮套演员、或者日系超级机器人动画中的机师,所以在日本,有时会形象地称声优为“中之人”
以动作捕捉和面部捕捉技术为基础的职业“虚拟主播”,其幕后的演员也被称为“中之人”。不过因为虚拟主播的表演与传统声优不太相同,除了演出“声音”以外,还要在动作表情上进行表演。
除了上一代虚拟偶像洛天依和初音都是电子合成音,而近年虚拟偶像为了使说话唱歌更像真人,大多都会使用“中之人”的方法。
“由于面部动作捕捉与身体动作捕捉属于不同的技术,所以在极端情况下,当一名虚拟偶像出现在直播间,其面部、身体要由两个人分别携带动捕设备。此外,还需要技术人员将两块动捕动画进行合成,再与“中之人”的语音录制进行音视频合成,最终才能呈现出观众看到的直播间效果。”(本段采访摘自新京报)
虚拟偶像的兴起有哪些客观社会因素?
首先,社交媒体的发展,美颜滤镜的盛行导致很多用户早已习惯P图和滤镜,在社交媒体上发布的经过八重滤镜调整的照片并不少见,所有这些不真实的美感都为虚拟偶像的崛起奠定了社会基础。
从宏观上来看,随着政策对饭圈的管控,以及部分知名明星陷入丑闻,虚拟偶像的商业风险无疑下降了许多。
复盘虚拟偶像的成功,成功有哪些奥秘?
还有的虚拟偶像依托当下最流行的流量媒介引爆传播:无论是早年间的电视机,随后的Facebook和Ins,再到今天的抖音、小红书等流量集中平台,虚拟偶像可以活跃于平台,经过精细化运营迅速打开知名度。
未来的技术能带来哪些进步?
从重人力投入到AI驱动的的未来:
从技术上看,制作虚拟偶像的技术包括TTS语音的合成技术,人物动作的AI生成技术,或真人复刻技术(真人的动态效果复刻到一个虚拟形象上去),以及嘴型、表情的驱动,这些系列AI技术都是核心。
但是驱动虚拟形象进行表演、说话、跟真人去互动的模式才是最重要的。所以未来虚拟偶像的技术最重要的就在于,是否可以根据剧本自动去生成一个虚拟偶像的人设,基于这个人设去进行表演:包括TTS语音合成,要富有音色,然后对话要能够有上下文,有逻辑性,有常识,然后它的动作是可以自动根据AI技术实时进行动作生成。注意,这里的生成一定要尽可能符合人类的真实情况:高兴的时候如何做动作,悲伤的时候如何做动作,这些动作要足够真实。
很多虚拟偶像的项目组会把大量的精力花在美术上:例如,如何提高皮肤的质感,提高头发的真实感,去思考更改渲染的风格,试图把这个虚拟偶像做的酷炫,但这并一定最重要:因为这样的虚拟偶像,只要去找一个游戏团队,只要投入足够资本,就能做的特别酷炫,但是这样一来,就变成了一个游戏美术团队。
难点还有哪些?
主要在场景落地,虚拟人只是皮,是一种表达的方式和载体,如果以数字人为主体去展开业务,如果找不到有价值的落地场景,和场景背后真正的价值,以及独家的不可替代性,那无论是怎样的虚拟人,都是无法产生长期价值。
虚拟偶像只是一个载体,最终推动虚拟偶像产业发展的还是真实存在的商业需求。
未来该如何发挥人工智能方面的能力,去构建一个虚拟人的灵魂。在这个基础上,哪怕去驱动一个玩偶,都可以让Ta表现的像真人一样有趣、生动、形象,这个是需要持续探索的。