目前,AIGC在音频天生领域已经相称成熟,并广泛运用于有声读物制作、语音播报、短视频配音、音乐合成等领域。AI音频天生紧张分为两种类型:语音合成与歌曲天生,这两种类型都有许多经典案例。
在语音合成领域,喜马拉雅曾采集著名评书演出艺术大师单田芳生前的演出声音,利用文本转语音(Text to Speech,简称TTS)技能,推出单田芳声音重现版的《毛氏三兄弟》和历史类作品。在QQ浏览器首页的“免费小说”频道中的听书功能模块,用户也可以选择自己喜好的AI语音包进行播放,语音包有六种AI音色可供选择:豁亮清明男声、标准男声、软萌音、御姐音、东北女声、温顺淑女音,并且合成的语音节奏分明、感情自然,能够很好地解放双眼。
除了语音读书,短视频配音也是一个常见的音频天生运用领域。“把稳看,这个男人叫小帅。”短视频平台的很多电影讲授都伴随这句话开始,随后很可能还会听到女主角“小美”的名字。抑扬抑扬的男声搭配一些电影的高潮情节画面,再加上相似的讲授套路和背景音乐,这实在也是AI天生语音的范例运用,用户只需3-5分钟就可以看完一部“电影”。当然,语音合成不仅可以运用于说话语音,也可以运用于唱歌语音,歌手歌声合成软件X studio就能够为用户供应具有不同音色和唱腔的虚拟歌声。
而对付AI歌曲天生,在OpenAI发布的最新项目MuseNet中,用户可以利用AI天生多达10种乐器演奏的歌曲,乃至还可以制作多达15种风格的音乐,模拟莫扎特和肖邦等古典作曲家、LadyGaga等当代艺术家,也可以模拟电子游戏音乐等类型。
除了直接天生音乐,AI歌曲在实际运用中常用来自动作词。“醒来残酷星光透过了窗台,海岸线连接了那片山川大海。涌动梦境边缘像是空旷舞台,在面前忽然展开。”看到这段笔墨,你的脑海中是否浮现出星河残酷、山川河海一望无际的绚丽景象呢?这段颇具画面感和动态美的歌词正是由网易新开拓的人工智能所创作。
网易伏羲利用自主研发的“有灵智能创作平台”,让AI学会人类措辞组织的基本逻辑。借助大规模的语料演习,用户可以仅凭借输入预设风格、标签、感情和韵脚便可以得到一首极富韵律美和意境感的歌词。例如,在设定好古风的预设风格之后,加入“夜晚”“梧桐”“叶落”“深秋”“乡愁”等标签并选定江阳韵,便得到了由人工智能创作的歌词。
一阵秋风晚夜微凉
不远处竹影悠长
梧桐路旁谁留下幽幽暗香
那一片片梧桐叶落我心上
孤灯暗夜风霜
梧桐心凄凉
低语道不尽半世情伤
深深秋雨让人惆怅
天上弯弯的玉轮
思念的人儿在他乡
这样的夜晚夜太漫长
心爱的姑娘你在何方
斜阳晚夜雪落西窗
留下一根琴弦唱着你的忧伤
梧桐雨巷人影茫茫
“孤灯,暗夜风霜”渲染了萧瑟悲惨的异域秋天景色,“天上弯弯的玉轮,思念的人儿在他乡”刻画了身在异域的有情人不得相见的哀婉与凄苦,用大略的意象却能营造出如此意境,实在是令人为之惊叹,人工智能天生音乐远比我们想象的更加闇练灵巧。当然,除了根据伴奏配歌词,人工智能同样可以根据编写好的歌词编曲。网易天音便是这样一个一站式的音乐编曲平台,不过,编曲的天生相对付歌词天生会更有难度,一样平常须要拥有一定的乐理根本、能够根据和弦谱进行编曲微调的编辑。
此外,AI歌曲天生还有一些更有趣的玩法,比如腾讯在2020年携手明星王俊凯推出了AI歌姬“艾灵”:当用户选择关键词后,可以输入个人的名字或昵称,AI便能自动天生带有用户名字的歌词,并会天生歌声与王俊凯共同演唱。