JASCO

JASCO官网链接地址：https://pages.cs.huji.ac.il/adiyoss-lab/JASCO/

网站默认显示语言：英语

JASCO 介绍

JASCO是一个结合了符号和基于音频的条件的文本到音乐生成模型，能够根据全局文本描述和细粒度的局部控制生成高质量的音乐样本。它基于流匹配建模范式和一种新颖的条件方法，允许音乐生成同时受到局部（例如和弦）和全局（文本描述）的控制。通过信息瓶颈层和时间模糊来提取与特定控制相关的信息，允许在同一个文本到音乐模型中结合符号和基于音频的条件。

JASCO用户群体

JASCO适用于音乐创作者、音乐理论家和任何对音乐生成技术感兴趣的人。它可以帮助用户通过文本描述来生成符合特定风格和情感的音乐，为音乐创作提供新的工具和灵感来源。

音乐创作者可以使用JASCO根据文本描述生成具有特定风格的音乐。音乐理论家可以利用JASCO探索不同文本描述对音乐生成的影响。教育工作者可以使用JASCO作为教学工具，帮助学生理解音乐与文本之间的关系。

JASCO的核心功能

• 支持全局文本描述和细粒度的局部控制。
• 基于流匹配建模范式和新颖的条件方法。
• 应用信息瓶颈层和时间模糊技术。
• 可以结合符号和基于音频的条件。
• 通过客观指标和人类研究评估生成质量和条件遵循度。
• 与基线模型相比，在生成质量上具有可比性，同时提供更灵活的控制。