声音合成+全息投影 代言小米的初音是怎么成为宅男女神的?
2017-02-13 17:36 初音未来 VOCALOID 3D全息投影技术

这是一个完整的粉丝经济的链条。

卖了好几天关子,2月8日,小米的开年第一机红米Note4X的代言人终于揭晓:二次元界最著名的日本虚拟偶像歌手——初音未来。雷音X初音……嗯,雷军这次瞄准了2.6亿二次元用户。

尽管骁龙625 处理器、4100mAh长续航、1300万像素相机和5.5"全高清屏的配置并无太大惊喜,1299元的售价也在意料之中,但红米Note4X的限量套装,完全就是为二次元饭们量身定制的初音未来全套周边:内含全新红米Note 4X 初音绿版,背面铭刻初音未来logo、限量编号,同时还配备限量版移动电源、初音未来手机保护壳,还可以下载初音未来主题。

2月14日,红米Note4X初音未来限量版将在B站独家预售。应援页面的人数现在已经突破了100万,预售时间也被提前到了凌晨0点。

小米官网图片

不谈小米这次打算去影响年轻人中特立独行的二次元群体这回事,可能有很多人还对这个虚拟的萌妹并非十分熟悉。但实际上,这却是在二次元界声名远播、拥有“世界第一公主殿下”之称的宅男女神,是史上最成功的的虚拟歌手。

拥有如此强大的人气和影响力,这个留着两个绿辫子跳甩葱舞的虚拟偶像,究竟是一种怎样的存在?

初音未来的创造者——音乐合成软件VOCALOID

初音未来是由日本音声制作和音乐软件制作公司CRYPTON FUTURE MEDIA(以下简称CRYPTON),在2007年以Yamaha的VOCALOID系列语音合成程序为基础开发的音源库。

日本声优藤田咲录制了构成日语的全部五十音的声音信息(包含了不同音调和不同情绪倾向),然后加工为可与VOCALOID软件对接的音源,并与画师KEI创作的初音未来形象,共同作为这一音源的代表。

也就是说,有了VOCALOID,才有了初音未来。

所以,VOCALOID又是什么?

上世纪90年代末,西班牙庞贝法布拉大学下的研究组MTG(Music Technology Group)和Yamaha合作开发出Vocaloid,其系统架构分为三部分:歌曲编辑器、音源库和合成引擎。

VOCALOID使用的声音合成技术最早被称为“频域音频谐接法”。通俗点说,就是合成引擎收到歌曲编辑器传来的乐谱信息后,会从音源库选择适当的声音元素,再基于一定的参数拼接合成到一起,最终形成一首完整连贯的歌曲。

音乐合成软件结构图

这一过程会涉及到大量细节,而经验丰富的YAMAHA恰好擅长对这些细节进行尽可能自然的处理。如果你要创作一首新的曲子,需要先规划歌词和音调,并在一个琴键界面(即歌曲编辑器)上进行编辑。接着,你可以更改每一个音符,并对生成的“唱词”进行各项微调,包括呼吸力度、口的开合甚至颤音。通过这些调整,原本破碎的声音数据就会变为连贯的类人电子声音。

有知乎网友认为,与其他同类软件相比,VOCALOID的优势很明显。从听觉来说,VOCALOID是单音,但母音合并得十分连贯,而且是纯粹的,也就是无感情参数的声音,需要手动修改的程度和自由度都高一些。

而饴屋/菖蒲氏开发的UTAU的母音结合并不是很连贯,有些要靠连续音来达成。但UTAU的连续音与VOCALOID相比,也更能还原歌手的唱腔,但自由度会低一些。

从市场定位上来比较,VOCALOID面向的用户比较专业,能够手工指定这些高阶参数也是意料之中的,所以至少在未来几年内VOCALOID的合成质量会比另一款软件CeVIO好。

3D技术助虚拟偶像突破次元壁

要让初音未来等虚拟偶像突破次元壁,在演唱会上载歌载舞,呈现立体逼真的效果,动作捕捉、3D虚拟成像和3D全息投影技术是一切的基础。

初音未来演唱会

动作捕捉技术通过红外线摄像机以及资料处理的动作分析系统,透过由受试者身上反光球执行反射回来的光线,将运用摄像机拍摄到的2D影像转换成3D资料,经过处理最终完成整个捕捉过程。

完成动作捕捉后,对生成的“人物骨骼”的“无痕”对接就需要由3D虚拟成像技术来完成。通过这项技术,创作者可以对人物形象进行修饰直到其符合受众的审美取向。

在演唱会上,3D全息投影技术至关重要。它突破了传统的声、光、电,形成高对比度和清晰度的3D图像。全球最大全息技术公司Sax 3D提供的全息投影显示屏所具备的透明,不受光线影响的特点,为初音未来演唱会现场的视觉效果提供了保障。借助这项技术,人们无需佩戴眼镜,通过空气就可以看到偶像。

商业化的根基:UGC

拥有了具体形象、名字、歌曲,初音从最初的软件生意,迅速成长为一个超级IP。初音的歌是电子合成,但是节奏鲜明,富有个性,也因此粉丝无数,而且你一定听过她的代表作,那就是大名鼎鼎的《甩葱歌》。拥有了超高人气,Crypton对初音未来进行了一系列成功的商业运作——持续发行新单曲、每年举办的世界巡回全息投影演唱会、卖软件拷贝、版权合作、代言广告。

可以看出,初音未来的价值是带动了虚拟歌手整条产业链的发展,包括音乐、画师、动画、游戏、广告代言、周边产品售卖等等。早在2012年的《日本产经新闻》报道显示,五岁的初音未来创下的经济效益就已经超过100亿日元(人民币约8亿元)。

初音未来,现在已经是日本人气第一的虚拟偶像歌手,被死宅们称为“世界第一公主殿下”。迷弟迷妹们也覆盖到世界各地,当然也包括中国。2015年和2016年,初音的3D全息投影演唱会在上海连续举办。

在麻省理工学院讲授日本流行文化的Ian Condry教授说:“初音未来是一个可以任意编辑的明星,是一个人人可以在其中进行自我创作的平台,通过人们的积极参与,她变成了一个‘有人性’的沟通工具。”

虚拟偶像的本质是同人UGC。粉丝和音乐人可以参与到产业链上的每个环节,进行二次创作并受到产权保护,极大提升了他们的参与感与忠诚度。

日本深厚的同人文化土壤,造就了一大批初音未来这样的虚拟偶像,但这似乎是一把双刃剑。

2011年11月20日,OCALOID CHINA PROJECT(简称VCP)正式运营,由YAMAHA正式授权上海禾念代理(但产权及出版方仍属于VOCALOID)。中文成员洛天依的经典歌曲《普通DISCO》还被李宇春翻唱而火爆一时,但公司却因经营不善在2014年1月31日终止运营。

相比日本深厚的同人文化土壤,中文Vocaloid还处于不成熟的“青春期”。由于语言和声库的限制,中国接受Vocaloid的速度比较慢。虽然偶有《渺小的Producer》这样的惊喜之作,但爱好者们的水平差异较大,暂时没有以制作Vocaloid卖专辑为职业的人。所以,中国的初音未来何时出现,就要看市场何时能培养成熟了。

初音的走红,并不是一个偶然现象。它与其他的虚拟人物不同。它有自己特有的设定图,技术赋予了它可以与粉丝直接发生交流的平台,打破了二次元虚拟世界的界限,大量优秀的创作者可以在平台上讨论与发挥,初音的形象借助技术也更为立体可以与粉丝产生互动——这是一个完整的粉丝经济的链条。

而科技的发展,更加完善的虚拟偶像的产业也将在未来诞生。比起初音只能在手办上、海报上、抱枕上等周边中和御宅族们为伴,随着人工智能和全息技术的发展,次元壁将进一步被打破,和初音“对话”也并非不可期待。去年年底,日本公司Vinclu发布了一款全息交互的二次元萌妹子装置GateBox,简单来说,就像是Siri +全息的初音未来,这个形象是个20岁女生的全息萌妹子可以和用户进行交流,你还可以用语音命令妹子打开家中的智能设备。

也许,一个全新的虚拟“歌姬”成为超级巨星的日子,并不遥远。