12月13日,2020网(wǎng)易(yì)未来大会(huì)首(shǒu)发AI原创单曲《醒来(lái)》,这也是网易(yì)首支词曲编唱全(quán)链路AI音(yīn)乐作品。歌词生动、旋律(lǜ)动(dòng)感(gǎn)、歌喉惊艳,展现出AI媲美(měi)专业(yè)音乐人的创作能力和歌唱实(shí)力。据了解,《醒来》由(yóu)网易伏羲(xī)、雷火(huǒ)音频(pín)部提供AI技(jì)术支(zhī)持,从(cóng)创作到演(yǎn)唱(chàng),生(shēng)成歌曲仅需一小(xiǎo)时。这套技术已(yǐ)应用于游戏、文旅(lǚ)、文创(chuàng)等多个(gè)领(lǐng)域,是(shì)网易伏羲(xī)AI技术应用落地的重要成果之一。
AI承包作(zuò)词编曲,演(yǎn)唱媲美(měi)专业歌手(shǒu)
“醒来灿烂星光(guāng)透过了窗台,海岸线连接(jiē)了那片山川大海(hǎi)。涌动梦境边(biān)缘像是(shì)空旷舞台,在(zài)眼前(qián)忽(hū)然展开。”实际(jì)上(shàng),要让AI成为(wéi)“唱作(zuò)人”,一(yī)方(fāng)面需要让(ràng)它具备(bèi)作词(cí)编曲及演唱在内的AI生(shēng)成技术能(néng)力;更(gèng)重要的是,还(hái)要让AI拥有音乐审美,能够基于创意,生成媲(pì)美真人专(zhuān)业创作者的(de)音乐作品(pǐn)。
据网易伏羲介(jiè)绍(shào),以《醒来》为例,为(wéi)了契合大(dà)会主(zhǔ)题“洞觉·未见”,网(wǎng)易伏羲团队勾勒了一个故事原型:在不远的未来,一(yī)个AI生成(chéng)的虚(xū)拟人在深夜醒来;歌曲希望体现出人类(lèi)与AI将(jiāng)成为最好的伙伴,表达人类与AI共同开启未来的期许。
基于创意(yì),在作词方面,网易伏羲(xī)自主研发(fā)的有(yǒu)灵智能(néng)创作平台,会(huì)先让AI学会人类语(yǔ)言组织的基本逻辑,借助(zhù)大规模预训练的语言模型GPT-2, 实现端到端的歌词(cí)生成。作曲方面(miàn),网易伏羲根据乐(lè)理的数据分(fèn)析,形成(chéng)了一(yī)套(tào)旋律生成算(suàn)法,可以在短时间内产出多个实用(yòng)性生成结果;编曲上,则采用雷火音频部自研的(de)智能编(biān)曲(qǔ)引擎(qíng),该(gāi)引擎覆盖华语乐坛主流风格,15-30秒就(jiù)能生成一首出版级歌曲。相(xiàng)同质量的人工编曲(qǔ),市场价(jià)格在(zài)1-1.5万元。
AI自动完成词曲创作后,还要让它拥有堪比(bǐ)真人专业歌手的演(yǎn)唱能力。所谓歌唱合(hé)成,本质上是指输入任意曲谱,可以得出(chū)人声输出的过程(chéng)。因此(cǐ),歌声(shēng)智能生成系统需要在声音(yīn)音 色、歌曲风(fēng)格等方面有大量数据沉淀。网(wǎng)易伏羲已经建立了一个庞大的歌唱合成库,音(yīn)色丰富,涵盖古风(fēng)、流行、电子、民谣等主流华语音乐风(fēng)格;通过端到端的歌声合成,并借助神经网络声(shēng)码器,可(kě)以(yǐ)生成既符合专(zhuān)业音乐审美,又契合(hé)歌(gē)曲(qǔ)主题(tí)的演唱作品。
AI赋能音(yīn)乐(lè)创(chuàng)作,商业应用前景(jǐng)广阔
近年(nián)来,不论是(shì)游戏、电影、电视、动(dòng)画(huà)片,还是短视频、网络综艺、虚拟偶像乐(lè)队、在线教育产品,都(dōu)需要大量高品质的音乐(lè)内容(róng)。在爆发式增长(zhǎng)的商业化音乐制作需求驱动下,用(yòng)AI赋能音乐创作(zuò),助力音乐工业化发展,早已不是天(tiān)方夜谭(tán)。
网易也(yě)在“AI+音乐创作”领域积累了大量应用案例。编(biān)曲(qǔ)方(fāng)面(miàn),网(wǎng)易雷火音频部作为专业游戏音频制作团队(duì),不(bú)仅(jǐn)服(fú)务《逆水寒》《遇见逆水(shuǐ)寒》《倩女幽魂》《倩女幽魂手(shǒu)游》等多个爆款游(yóu)戏(xì)的音(yīn)频开发;还同时(shí)深耕智能音(yīn)频(pín)生成(chéng)领域研发,率先部署了工业出版级(jí)智能编曲系统,其智能编曲技术(shù)已(yǐ)到达(dá)唱片行业出版级标准(zhǔn),具备工业化(huà)大批量生产的能(néng)力。
歌(gē)词创作方面,网易伏羲(xī)自(zì)主研发(fā)的有灵智能创作平台作为“AI写歌词”的技术(shù)底层,独创“人机协(xié)同(tóng)”的歌词创作辅助模式帮助用(yòng)户创作(zuò)。例如,用户(hù)如果以“雪”作为标签,AI算法会(huì)自动推(tuī)荐与“雪”相关的场景、意象、画面,来保证歌词生成(chéng)得到更好质量;用户甚至可以只输入一段自己的故事,在AI的辅助下,故事就可以转换为专属歌词。此(cǐ)外,用户还(hái)可以通过有灵AI,完成高质量(liàng)诗词、歌词(cí)和剧情类(lèi)文字(zì)的创作(zuò)。
网易伏羲也在积极拓展相关(guān)AI技术(shù)的落地场景。今年11月,杭州中国丝(sī)绸城步行街(jiē)完成改造升级,宣布(bù)全(quán)面(miàn)引入(rù)网易伏羲的AI前沿技术及应用。体验区内,游客输入自(zì)己的姓(xìng)名,“AI诗人”及就会创作专(zhuān)属“藏头诗”一(yī)首;借助实时动作捕捉(zhuō)技(jì)术,游客(kè)可以与装置(zhì)内的虚拟人(rén)跨屏共舞;按下展馆(guǎn)内的琴键,就(jiù)可以让(ràng)虚拟(nǐ)人“素问”根据(jù)旋律和节奏翩翩起舞……这些融入音乐、舞蹈(dǎo)、诗歌等AI沉(chén)浸式互动体验(yàn),让年轻人体验(yàn)“黑科技(jì)”的同时,传承优秀传统文化。
值得注意的是(shì),国内文旅产业正在(zài)迎(yíng)来发展新契(qì)机。近期发(fā)布的(de)《“十四五(wǔ)”规划(huá)和二零三五年年远景(jǐng)目标的建议(yì)》提(tí)出,实施文(wén)化产(chǎn)业数字化战略,推动(dòng)文化和旅游融合(hé)发展。在这一大背景下,AI与文旅的交融结合,或许将掀起新一波AI商业化落地浪潮。