Seed-Music – 字节跳动推出的AI音乐生成大模型

Seed-Music 是字节跳动豆包大模型团队推出的音乐生成与编辑系统，能够生成高质量、风格多样的音乐，并支持音乐创作的多种任务。通过结合自动回归语言模型和扩散模型的优势，Seed-Music 旨在满足不同用户的创作需求，从小白用户到专业音乐人都能在其框架下进行个性化的音乐创作。

Seed-Music的主要功能

为了适应多元群体的 AI 辅助音乐创作需求，Seed-Music 提供了四大核心功能：可控音乐生成、谱转曲、词曲编辑、零样本人声克隆，具体涵盖十种创作任务，满足音乐小白、专业音乐人的不同场景需求。

• 可控音乐生成：Seed-Music支持根据歌词、音乐风格、情绪等生成 1 分钟片段或 3 分钟的完整歌曲，还可以进行歌曲仿写和纯器乐生成。
• 谱转曲功能：通过输入领谱（主旋律、和弦标记等），用户可以轻松生成完整的音乐作品，并对音符的细节进行编辑。
• 音乐编辑：基于扩散模型，用户可以对现有音乐中的歌词或旋律进行局部修改，确保修改区域与整体风格自然过渡。
• 零样本人声克隆：通过 10 秒的语音录制，系统可以将用户的声音转换为歌声，实现个性化的音乐创作。

Seed-Music的应用场景

• 个人音乐创作：小白用户可以通过输入简单的文字提示生成完整的音乐作品，或将自己的声音融入音乐中。
• 专业音乐创作：专业音乐人可以使用领谱功能，快速生成歌曲，并对乐谱进行精细编辑，节省创作时间与成本。
• 跨语言音乐生成：Seed-Music 支持基于不同语言歌词生成音乐，适用于跨文化、跨语言的音乐创作场景。
• 多媒体创作：未来，Seed-Music 的生成能力可以与游戏、短视频等多媒体内容相结合，生成与故事情节或视觉风格相匹配的音乐。

如何使用Seed-Music？

如果对 Seed-Music 的成果感兴趣，可以访问官网体验更多 demo 效果、了解更多技术细节。

• Seed-Music 官网地址：https://team.doubao.com/seed-music
• Seed-Music 技术报告地址：https://arxiv.org/pdf/2409.09214