正在阅读:

珈乐AIGC,AI语音技术与复活虚拟偶像

扫一扫下载界面新闻APP

珈乐AIGC,AI语音技术与复活虚拟偶像

语音合成技术搞出来的AI是不能达到数字生命一样高度的。

文 | 娱乐资本论 雪夜枫麟

穿梭时间的画面的钟

从反方向 开始移动

回到当初爱你的时空

停格内容 不忠

所有回忆对着我进攻

我的伤口 被你拆封

誓言太沉重泪被纵容

脸上汹涌 失控

这些歌词来自周杰伦首张同名专辑《Jay》中的经典歌曲《反方向的钟》。很多人都翻唱过这首歌,但最近一段普通的翻唱视频在B站获得了近10万的播放量,令人颇为意外。

这一空灵的音色源自于去年5月进入活动休眠的前A-SOUL成员珈乐。不过,《反方向的钟》翻唱并非珈乐中之人(昵称33)亲自演绎,而是要归功于AIGC技术的日新月异。

去年年底以来,AI处理人声的相关技术开始以迅猛的速度进化。通过不断地“喂料”,机器可以轻松模拟一个人的声音,最简单的处理就是利用模拟的音声来生成翻唱视频。

上传珈乐AI翻唱视频的UP主存梦P可能做梦也没有想到,一段贴合个人情感的AI翻唱歌曲《反方向的钟》,能够获得如此之多的共鸣。播放量和珈乐中之人真人出道的啵啵小狗341现在的视频不相上下。

事实上,随着ChatGPT和AI声音学习的门槛逐渐降低,复活休眠的虚拟偶像对于普通粉丝而言不再是一件遥不可及的事情。就像《流浪地球2》里说的那样,只要算力能够实现,粉丝们当然可以给珈乐这个角色“完整的一生”。

小娱走访了三位AI珈乐的内容创作者,了解到他们创作这些AI内容的初衷非常简单,那就是希望用珈乐AI的形式,听一听那些珈乐还没有唱过的歌,找回属于粉丝自己的欢乐时光。

只是这些创作者们发现,随着时间的推移,他们对于虚拟偶像的情感开始越来越复杂。原本对珈乐以及其中之人采取中立态度的他们,也不得不选边站队。

粉丝们当然想像《反方向的钟》歌词唱到的那样,回到当初爱A-SOUL爱珈乐的时空。不过,面临人生新阶段的他们,还是要回归现实。

以下是他们的故事。

选曲方向不同,《流浪地球2》激发珈乐AI的诞生

最早尝试制作AI珈乐的是UP主アホ鶴。2022年12月21日,第一支珈乐AI翻唱的《夜半小夜曲》上线。因为是一首粤语歌曲,加上当时的技术还没有那么成熟,珈乐AI的表现难言满意。アホ鶴给视频打上的Tag是【珈乐/33翻唱】,显然他没有想要对中之人和珈乐这个角色进行切割。

アホ鶴告诉小娱,他为珈乐AI的选曲标准非常简单,基本都是珈乐只唱了一段的歌,或者说过要唱但是直到毕业也没演绎的曲目。

相比之下,存梦P的选曲模式就大不一样了。一开始的测试阶段,存梦P希望能够找到一些音域较低的歌曲,方便珈乐AI学习与呈现。于是,薛之谦的《我好像在哪里见过你》成为存梦P调教珈乐AI的处女作。

“《我好像在哪里见过你》的歌词对我的内心还是有所触动的。2 月份的时候,珈乐其实已经休眠了大半年。我好像在哪里见过你这一句话,就让我不由自主地联想到珈乐,仿佛她出现在我的面前,最后就选择了这首歌作为测试曲目,”存梦P说道。

在那之后,存梦P的珈乐AI受到了一定的关注,他也开始制作一些粉丝们呼声比较高的歌曲。当然,他自己也会把关翻唱的选曲,是否能够让A-SOUL或是珈乐的粉丝们找回失去的情感,而非一味地追求流量。

アホ鶴和存梦P都是计算机专业出身,对AI技术一直是抱持着开放态度。无论是语音合成技术DiffSinger,还是音色转换技术so-vits-svc,アホ鶴早已进行了深层次接触。存梦P的技术功底没有アホ鶴那么深厚,摸索珈乐AI内容的创作过程中,第一个找到的学习对象正是アホ鶴。

当被问道为什么近期使用AIGC复活虚拟偶像的行为越来越多的时候,存梦P半开玩笑地表示,春节期间上映的《流浪地球2》对于早已出现的AI技术或许起到了曝光的作用。

存梦P说:“当时我和朋友看完电影,回家的路上就一直在探讨数字生命的可行性,以及对于数字生命的态度。朋友就随便提了一句,说你最爱的那个叫珈乐的虚拟主播,是不是也能做个数字生命。”

说者无意,听者有心,存梦P当时立即向朋友科普,语音合成技术搞出来的AI是不能达到数字生命一样高度的。但存梦P也告诉朋友,如果有相关的技术和机会,他愿意尝试复现一个珈乐AI翻唱的内容,即便AI合成的版权问题非常令人头疼。于是差不多20天之后,存梦P启动了“珈乐AI计划”。

A-SOUL收获大学生群体认同,珈乐AI形成小圈子传承

如果把时钟拨回到去年的5月,恐怕是所有A-SOUL粉丝噩梦般的一个月。

官宣前一周,アホ鶴已经听到了一些小道消息说珈乐要毕业了。当时A-SOUL还处在一个很不错的上升期,包括アホ鶴自己都没把这个消息当回事。直到毕业的当天,33的网易云账号被曝出。在她的网易云动态中,33表现的非常憔悴和抑郁,事情最终走向了所有人都不愿意面对的结果。

アホ鶴和存梦P都曾经加入到帮珈乐维权的行列中。アホ鶴向小娱透露:“我们当时一直以为作为国内业界的头部,虚拟的背后中之人们应该过得很好,实在没想到人家小姑娘背地里偷偷抹眼泪呢。这当然让任何一个正常人都无法接受。于是就开始了漫长的帮助中之人维权的道路。我当时在微博,b站,推特的相关话题中比较活跃,并且参加了一些维权活动。”

粉丝们为何对A-SOUL投入如此之深的情感?存梦P认为,19-20两届大学生是A-SOUL粉丝群体中重要组成部分。他们没有办法走出校门,虚拟主播成为了他们闷在宿舍里的一项重要消遣。这也就可以解释为什么这两年虚拟偶像领域迎来了大爆发。

A-SOUL刚出道的时候,没人认为他们和日本的vTuber有什么区别。甚至因为乐华和字节跳动的背景,令存梦P以及和他一样的大学生群体对A-SOUL产生了一定的排斥。不过,A-SOUL恰恰是凭借着五名成员的努力,逐渐迎回了观众的心。

(图片来自于A-SOUL官方微博)

存梦P直言,相对逼仄和压抑的大学生活之下,他能够从A-SOUL成员的身上看到自己的影子。嘉然朗读粉丝小作文之后的掩面哭泣,一直留在了存梦P的内心。“直播的时候,他们会玩我们玩过的游戏,他们会聊着我们聊过的话题,虚拟主播的陪伴感就融入了我们这些粉丝的日常生活里,”存梦P说道。

UP主赛博图恒宇是2021年入坑A-SOUL的。在当时的他看来,A-SOUL和饭圈有很大区别,掀起了一场V圈的业界革命。它一度成为了赛博图恒宇求学路上的精神寄托。

事件曝光的时候,赛博图恒宇还有一个月就将迎来人生中最为重要的一场考试——高考。珈乐的退出让他体会到了五雷轰顶是什么样的感觉。所幸,A-SOUL的崩塌并没有影响赛博图恒宇的高考,他还是考上了自己心仪的学校。

正是带着这份对珈乐的爱,加上アホ鶴和存梦P等前辈制作的珈乐AI先例,计算机知识功底没那么深厚的赛博图恒宇也走上了制作珈乐AI翻唱视频的道路。

用赛博图恒宇的话说,他很喜欢鼓捣这些东西,但初期的难度还是远超赛博图恒宇的想象。宿舍里没有更高端的设备,只有一台笔记本,因此赛博图恒宇只能租用云服务器来跑人工智能模型,进而制作珈乐AI翻唱歌曲。这个过程中,他也向存梦P请教了许多问题。

アホ鶴——存梦P——赛博图恒宇,短短三个月时间里,珈乐AI这个小圈子甚至就有了属于自己的传承。

珈乐中之人不敌珈乐AI,创作者走入人生十字路口

33独立成为真人主播之后,围绕在A-SOUL粉丝内部的争端就从来没有停止过。究竟是喜欢33还是那个曾经的珈乐,要不要转投去看33现在的直播,都是这将近一年来A-SOUL粉丝时常争吵的话题。

有意思的是,制作珈乐AI的三位创作者本人对这件事起初并没有更为明确的立场,也就是我们常说的骑墙派。

存梦P早已不愿意去关心所谓的真相是什么。因为无论如何,A-SOUL都是从5个人变成了4+1。存梦P喜欢其实是那个珈乐角色性格的皮套,以及拥有33的声音的虚拟形象,而非33本人。毕竟所有人都已经意识到,之前珈乐的各种性格都是有台本的,33不断显露出的对待生活的态度,和当初人们喜欢的那个珈乐完全不同。于是,珈乐AI恰好能够满足存梦P的需求。

赛博图恒宇也是一样。从5月份开始,赛博图恒宇见识过了太多的反转,他觉得这么争执下去是没有尽头的,普通观众也没法真正了解事情的全貌。无论是33,还是现在的A-SOUL,赛博图恒宇认为他们的饭圈气息都太重了,自然不想加入任何一方。

不过,A-SOUL的粉丝们,究竟想要的是珈乐,还是33,从珈乐AI和啵啵小狗341的播放量对比就可以管中窥豹。

啵啵小狗341刚刚建号的时候,粉丝数量迅速达到了20万的量级,头三条视频的播放量也突破了百万。自此之后,33B站视频的播放量就一路下滑,目前主要的翻唱视频播放量已经不足10万,粉丝数回落到15.5万左右。

与之相对比,アホ鶴B站粉丝数只有600出头,但珈乐AI翻唱的《错位时空》获得了2.5万的播放量,更不用说存梦P高达8.5万播放量的《反方向的钟》,他的粉丝数只有927。

アホ鶴拿另一个中之人单飞的文静-飞鸟Official和珈乐进行了对比:“文静起初和珈乐的情况差不多,都是活动终止,但是中之人明前奶绿单飞之后,走势要远比珈乐好太多了。文静AI目前也有相关视频,但他们肯定打不过明前奶绿的账号,啵啵小狗就完全不行了。”

让自己曾经喜爱的虚拟偶像唱自己想听的歌,还能收获一定的认同,恐怕每个人都希望把这样的事情一直做下去。然而,伴随着情势的变化,创作者们也都面临着各自不同的困境。

2022年的最后一天,アホ鶴在B站发布了一段名为《和大家聊聊Ai珈乐,33和正皇骑》的视频。视频中,アホ鶴的疲惫感尽显,并流露出不想再继续制作珈乐AI的想法。

和アホ鶴交流的过程中小娱得知,那段时间一些支持33的粉丝们对アホ鶴进行了开盒(人肉搜索),导致他受到了不少被威胁的私信。后来事件平息之后,アホ鶴又陆续制作了一系列珈乐AI视频。

存梦P的情况稍有不同,大四的他正在面临春招和毕设的双重压力,他的个人时间越来越少。

“其实慢慢的我也意识到,人还是需要活在现实里,互联网可以是你的一个避风港,可以给你带来心灵的寄托,但是你不能一辈子就是困在一个互联网的符号里。我觉得人还是更应该要走出去看看,”存梦P说。

采访的末尾,存梦P向小娱透露,他正在和室友筹划毕业旅行,之后也有拜访曾经工作过的战队的计划,线下看一次他们的比赛,祭奠自己的青春。至于珈乐AI,目前他还在积极产出相关视频,但未来肯定会渐渐淡出。

本文为转载内容,授权事宜请联系原著作权人。

评论

暂无评论哦,快来评价一下吧!

下载界面新闻

微信公众号

微博

珈乐AIGC,AI语音技术与复活虚拟偶像

语音合成技术搞出来的AI是不能达到数字生命一样高度的。

文 | 娱乐资本论 雪夜枫麟

穿梭时间的画面的钟

从反方向 开始移动

回到当初爱你的时空

停格内容 不忠

所有回忆对着我进攻

我的伤口 被你拆封

誓言太沉重泪被纵容

脸上汹涌 失控

这些歌词来自周杰伦首张同名专辑《Jay》中的经典歌曲《反方向的钟》。很多人都翻唱过这首歌,但最近一段普通的翻唱视频在B站获得了近10万的播放量,令人颇为意外。

这一空灵的音色源自于去年5月进入活动休眠的前A-SOUL成员珈乐。不过,《反方向的钟》翻唱并非珈乐中之人(昵称33)亲自演绎,而是要归功于AIGC技术的日新月异。

去年年底以来,AI处理人声的相关技术开始以迅猛的速度进化。通过不断地“喂料”,机器可以轻松模拟一个人的声音,最简单的处理就是利用模拟的音声来生成翻唱视频。

上传珈乐AI翻唱视频的UP主存梦P可能做梦也没有想到,一段贴合个人情感的AI翻唱歌曲《反方向的钟》,能够获得如此之多的共鸣。播放量和珈乐中之人真人出道的啵啵小狗341现在的视频不相上下。

事实上,随着ChatGPT和AI声音学习的门槛逐渐降低,复活休眠的虚拟偶像对于普通粉丝而言不再是一件遥不可及的事情。就像《流浪地球2》里说的那样,只要算力能够实现,粉丝们当然可以给珈乐这个角色“完整的一生”。

小娱走访了三位AI珈乐的内容创作者,了解到他们创作这些AI内容的初衷非常简单,那就是希望用珈乐AI的形式,听一听那些珈乐还没有唱过的歌,找回属于粉丝自己的欢乐时光。

只是这些创作者们发现,随着时间的推移,他们对于虚拟偶像的情感开始越来越复杂。原本对珈乐以及其中之人采取中立态度的他们,也不得不选边站队。

粉丝们当然想像《反方向的钟》歌词唱到的那样,回到当初爱A-SOUL爱珈乐的时空。不过,面临人生新阶段的他们,还是要回归现实。

以下是他们的故事。

选曲方向不同,《流浪地球2》激发珈乐AI的诞生

最早尝试制作AI珈乐的是UP主アホ鶴。2022年12月21日,第一支珈乐AI翻唱的《夜半小夜曲》上线。因为是一首粤语歌曲,加上当时的技术还没有那么成熟,珈乐AI的表现难言满意。アホ鶴给视频打上的Tag是【珈乐/33翻唱】,显然他没有想要对中之人和珈乐这个角色进行切割。

アホ鶴告诉小娱,他为珈乐AI的选曲标准非常简单,基本都是珈乐只唱了一段的歌,或者说过要唱但是直到毕业也没演绎的曲目。

相比之下,存梦P的选曲模式就大不一样了。一开始的测试阶段,存梦P希望能够找到一些音域较低的歌曲,方便珈乐AI学习与呈现。于是,薛之谦的《我好像在哪里见过你》成为存梦P调教珈乐AI的处女作。

“《我好像在哪里见过你》的歌词对我的内心还是有所触动的。2 月份的时候,珈乐其实已经休眠了大半年。我好像在哪里见过你这一句话,就让我不由自主地联想到珈乐,仿佛她出现在我的面前,最后就选择了这首歌作为测试曲目,”存梦P说道。

在那之后,存梦P的珈乐AI受到了一定的关注,他也开始制作一些粉丝们呼声比较高的歌曲。当然,他自己也会把关翻唱的选曲,是否能够让A-SOUL或是珈乐的粉丝们找回失去的情感,而非一味地追求流量。

アホ鶴和存梦P都是计算机专业出身,对AI技术一直是抱持着开放态度。无论是语音合成技术DiffSinger,还是音色转换技术so-vits-svc,アホ鶴早已进行了深层次接触。存梦P的技术功底没有アホ鶴那么深厚,摸索珈乐AI内容的创作过程中,第一个找到的学习对象正是アホ鶴。

当被问道为什么近期使用AIGC复活虚拟偶像的行为越来越多的时候,存梦P半开玩笑地表示,春节期间上映的《流浪地球2》对于早已出现的AI技术或许起到了曝光的作用。

存梦P说:“当时我和朋友看完电影,回家的路上就一直在探讨数字生命的可行性,以及对于数字生命的态度。朋友就随便提了一句,说你最爱的那个叫珈乐的虚拟主播,是不是也能做个数字生命。”

说者无意,听者有心,存梦P当时立即向朋友科普,语音合成技术搞出来的AI是不能达到数字生命一样高度的。但存梦P也告诉朋友,如果有相关的技术和机会,他愿意尝试复现一个珈乐AI翻唱的内容,即便AI合成的版权问题非常令人头疼。于是差不多20天之后,存梦P启动了“珈乐AI计划”。

A-SOUL收获大学生群体认同,珈乐AI形成小圈子传承

如果把时钟拨回到去年的5月,恐怕是所有A-SOUL粉丝噩梦般的一个月。

官宣前一周,アホ鶴已经听到了一些小道消息说珈乐要毕业了。当时A-SOUL还处在一个很不错的上升期,包括アホ鶴自己都没把这个消息当回事。直到毕业的当天,33的网易云账号被曝出。在她的网易云动态中,33表现的非常憔悴和抑郁,事情最终走向了所有人都不愿意面对的结果。

アホ鶴和存梦P都曾经加入到帮珈乐维权的行列中。アホ鶴向小娱透露:“我们当时一直以为作为国内业界的头部,虚拟的背后中之人们应该过得很好,实在没想到人家小姑娘背地里偷偷抹眼泪呢。这当然让任何一个正常人都无法接受。于是就开始了漫长的帮助中之人维权的道路。我当时在微博,b站,推特的相关话题中比较活跃,并且参加了一些维权活动。”

粉丝们为何对A-SOUL投入如此之深的情感?存梦P认为,19-20两届大学生是A-SOUL粉丝群体中重要组成部分。他们没有办法走出校门,虚拟主播成为了他们闷在宿舍里的一项重要消遣。这也就可以解释为什么这两年虚拟偶像领域迎来了大爆发。

A-SOUL刚出道的时候,没人认为他们和日本的vTuber有什么区别。甚至因为乐华和字节跳动的背景,令存梦P以及和他一样的大学生群体对A-SOUL产生了一定的排斥。不过,A-SOUL恰恰是凭借着五名成员的努力,逐渐迎回了观众的心。

(图片来自于A-SOUL官方微博)

存梦P直言,相对逼仄和压抑的大学生活之下,他能够从A-SOUL成员的身上看到自己的影子。嘉然朗读粉丝小作文之后的掩面哭泣,一直留在了存梦P的内心。“直播的时候,他们会玩我们玩过的游戏,他们会聊着我们聊过的话题,虚拟主播的陪伴感就融入了我们这些粉丝的日常生活里,”存梦P说道。

UP主赛博图恒宇是2021年入坑A-SOUL的。在当时的他看来,A-SOUL和饭圈有很大区别,掀起了一场V圈的业界革命。它一度成为了赛博图恒宇求学路上的精神寄托。

事件曝光的时候,赛博图恒宇还有一个月就将迎来人生中最为重要的一场考试——高考。珈乐的退出让他体会到了五雷轰顶是什么样的感觉。所幸,A-SOUL的崩塌并没有影响赛博图恒宇的高考,他还是考上了自己心仪的学校。

正是带着这份对珈乐的爱,加上アホ鶴和存梦P等前辈制作的珈乐AI先例,计算机知识功底没那么深厚的赛博图恒宇也走上了制作珈乐AI翻唱视频的道路。

用赛博图恒宇的话说,他很喜欢鼓捣这些东西,但初期的难度还是远超赛博图恒宇的想象。宿舍里没有更高端的设备,只有一台笔记本,因此赛博图恒宇只能租用云服务器来跑人工智能模型,进而制作珈乐AI翻唱歌曲。这个过程中,他也向存梦P请教了许多问题。

アホ鶴——存梦P——赛博图恒宇,短短三个月时间里,珈乐AI这个小圈子甚至就有了属于自己的传承。

珈乐中之人不敌珈乐AI,创作者走入人生十字路口

33独立成为真人主播之后,围绕在A-SOUL粉丝内部的争端就从来没有停止过。究竟是喜欢33还是那个曾经的珈乐,要不要转投去看33现在的直播,都是这将近一年来A-SOUL粉丝时常争吵的话题。

有意思的是,制作珈乐AI的三位创作者本人对这件事起初并没有更为明确的立场,也就是我们常说的骑墙派。

存梦P早已不愿意去关心所谓的真相是什么。因为无论如何,A-SOUL都是从5个人变成了4+1。存梦P喜欢其实是那个珈乐角色性格的皮套,以及拥有33的声音的虚拟形象,而非33本人。毕竟所有人都已经意识到,之前珈乐的各种性格都是有台本的,33不断显露出的对待生活的态度,和当初人们喜欢的那个珈乐完全不同。于是,珈乐AI恰好能够满足存梦P的需求。

赛博图恒宇也是一样。从5月份开始,赛博图恒宇见识过了太多的反转,他觉得这么争执下去是没有尽头的,普通观众也没法真正了解事情的全貌。无论是33,还是现在的A-SOUL,赛博图恒宇认为他们的饭圈气息都太重了,自然不想加入任何一方。

不过,A-SOUL的粉丝们,究竟想要的是珈乐,还是33,从珈乐AI和啵啵小狗341的播放量对比就可以管中窥豹。

啵啵小狗341刚刚建号的时候,粉丝数量迅速达到了20万的量级,头三条视频的播放量也突破了百万。自此之后,33B站视频的播放量就一路下滑,目前主要的翻唱视频播放量已经不足10万,粉丝数回落到15.5万左右。

与之相对比,アホ鶴B站粉丝数只有600出头,但珈乐AI翻唱的《错位时空》获得了2.5万的播放量,更不用说存梦P高达8.5万播放量的《反方向的钟》,他的粉丝数只有927。

アホ鶴拿另一个中之人单飞的文静-飞鸟Official和珈乐进行了对比:“文静起初和珈乐的情况差不多,都是活动终止,但是中之人明前奶绿单飞之后,走势要远比珈乐好太多了。文静AI目前也有相关视频,但他们肯定打不过明前奶绿的账号,啵啵小狗就完全不行了。”

让自己曾经喜爱的虚拟偶像唱自己想听的歌,还能收获一定的认同,恐怕每个人都希望把这样的事情一直做下去。然而,伴随着情势的变化,创作者们也都面临着各自不同的困境。

2022年的最后一天,アホ鶴在B站发布了一段名为《和大家聊聊Ai珈乐,33和正皇骑》的视频。视频中,アホ鶴的疲惫感尽显,并流露出不想再继续制作珈乐AI的想法。

和アホ鶴交流的过程中小娱得知,那段时间一些支持33的粉丝们对アホ鶴进行了开盒(人肉搜索),导致他受到了不少被威胁的私信。后来事件平息之后,アホ鶴又陆续制作了一系列珈乐AI视频。

存梦P的情况稍有不同,大四的他正在面临春招和毕设的双重压力,他的个人时间越来越少。

“其实慢慢的我也意识到,人还是需要活在现实里,互联网可以是你的一个避风港,可以给你带来心灵的寄托,但是你不能一辈子就是困在一个互联网的符号里。我觉得人还是更应该要走出去看看,”存梦P说。

采访的末尾,存梦P向小娱透露,他正在和室友筹划毕业旅行,之后也有拜访曾经工作过的战队的计划,线下看一次他们的比赛,祭奠自己的青春。至于珈乐AI,目前他还在积极产出相关视频,但未来肯定会渐渐淡出。

本文为转载内容,授权事宜请联系原著作权人。