OpenAI打造AI“百变歌姬”！训练120万首歌曲，化身猫王布兰妮

元数据包括艺术家、专辑风格、歌曲年份、每首歌表达的常见情绪和播放列表关键字等。研究人员用32-bit，44.1kHz的原始音频进行训练。除了原始音频，研究人员还通过随机向下混合左右声道产生单声道音频来加强训练效果。

为了使生成的音乐效果更好，研究人员指定了生成歌曲的歌手和艺术风格。训练结果显示，模型可以在无监督方式下将风格相似的艺术家或流派分为一类。

模型将120万首歌曲及音乐家等数据分类为雷鬼音乐、乡村音乐、电影原声带、古典音乐、POP、爵士乐、布鲁斯音乐、灵魂乐、摇滚乐、Hip-Hop和R&B等。

为了使歌词与音频相匹配，研究人员设计了一个简单的方案：训练时，为每个字符设置一个固定播放时长的窗口，随着音乐持续，歌词字符按时间顺序播放。

训练结果显示，借助这一方案，大部分歌词都能与音频相匹配，除了语速较快的Hip-Hop音乐。

为了解决这一问题，研究人员使用音轨分离软件Spleeter从每首歌曲中提取人声，再用自动歌词排列工具NUS AutoLyricsAlign为提取出的人声实现单词级别的匹配，以此达到精确的歌词匹配效果。

（编辑：555手机网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!