2024 年 9 月 18 日,字节跳动推出了一款名为 Seed-Music 的音乐生成模型。该模型能够通过输入多模态数据(如文本描述、音频参考、乐谱、声音提示等)生成和编辑音乐。Seed-Music 支持声乐和器乐生成,并具备歌声合成、歌声转换和音乐编辑等多种功能。用户只需 10 秒的语音或歌声录音即可转换为不同风格的音乐。
Seed-Music 的核心技术在于其多模态数据输入和后期编辑功能。用户可以通过文本描述、音频参考、乐谱、声音提示等多种方式输入数据,Seed-Music 会根据这些输入生成相应的音乐作品。该模型还支持修改歌词或旋律,并能进行音乐转换。
与其他音乐生成模型相比,Seed-Music 在多模态数据处理和音乐编辑功能上具有优势。例如,昆仑万维的 Melodio 和 Mureka 平台主要依赖于文本提示生成音乐,缺乏 Seed-Music 的多模态数据输入和后期编辑功能。此外,Seed-Music 在音乐转换和歌声合成方面表现良好,能够生成自然且富有表现力的音乐作品。
用户体验方面,Seed-Music 的界面设计简洁直观,用户可以轻松上手。许多用户在社交媒体上分享了他们使用 Seed-Music 创作的音乐作品,并对模型的表现给予了评价。尽管 Seed-Music 在技术和用户体验上表现良好,但也有一些用户提出了改进建议。例如,有用户希望增加更多的音乐风格和音色选择,以满足不同创作需求。还有用户建议优化模型的响应速度,进一步提升用户体验。
字节跳动表示,将根据用户反馈不断优化和升级 Seed-Music,推出更多功能。字节跳动还宣布,Seed-Music 将与多家唱片公司合作,提供更多音乐内容。这一合作将为唱片公司带来新的创作工具,提升音乐制作效率,同时也为 Seed-Music 提供了更多的应用场景。例如,唱片公司可以利用 Seed-Music 快速生成不同风格的音乐样本,进行市场测试和推广。此外,Seed-Music 的歌声合成功能还可以用于制作虚拟歌手的音乐作品。
对于独立音乐人来说,Seed-Music 是一个创作工具。独立音乐人可以通过 Seed-Music 快速生成音乐作品,降低制作成本,并通过字节跳动的平台进行推广和销售。Seed-Music 的广泛应用也引发了一些争议。一些音乐人担心,AI 生成的音乐作品可能会对传统音乐创作产生冲击,甚至取代人类音乐人的地位。对此,字节跳动表示,Seed-Music 的目标是辅助而非取代人类音乐创作。AI 技术可以为音乐创作提供更多的灵感和工具,但最终的创作过程仍然需要人类的参与和把控。