YuE2-3B: модель преобразования текста песни в песню для ComfyUI

ComfyUI Wiki

YuE2-3B: 3B-модель m-a-p для преобразования текста песни в песню в ComfyUI. Текст и стилевой промпт дают полноценную песню с редактируемой партитурой мелодии и аккордов.

Y

YuE2-3B

Генерация музыкиСимволическое планированиеКаверы песенАгентное редактирование

Открытая 3B-модель преобразования текста песни в песню от команды m-a-p. Создает полноценные песни с вокалом и accompaniment по тексту и стилевому промпту, перед рендерингом составляет редактируемый план мелодии и аккордов (ABC notation) и поддерживает правки партитуры под управлением агента. Превосходит Suno v5 на WildSongBench.

РазработчикMultimodal Art Projection (m-a-p)
Дата выпуска2026-09-09
АрхитектураAR–NAR Mixture-of-Transformers (планирование + flow matching)
ЛицензияCC-BY-NC-4.0
Параметры3B
ВыходСтерео аудио 48 кГц
VRAM24 ГБ GPU (BF16, без квантования)

Возможности

  • Text-to-song: текст песни и стилевой промпт превращаются в полноценную песню с вокалом и сопровождением
  • Редактируемая партитура: мелодия и аккорды планируются в ABC notation, их можно изменить перед рендерингом или задать напрямую
  • Каверы: существующие песни переосмысливаются в новом стиле
  • Агентное редактирование: музыкальная обратная связь преобразуется в правки партитуры, стиля и текста на протяжении итераций рендеринга

Связанные материалы

Guides and workflows related to this model series.

No articles found.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…