Plenio 1.5: свои тексты, шаблоны и креативность до 200

ComfyUI Wikinews

Plenio 1.5 для ComfyUI поёт ваши собственные тексты точно как написано, записывает значения стилевых шаблонов в Song Brief и поднимает креативность до 200.

<strong>Plenio Music Production System 1.5</strong> вышла. Студия песен для ComfyUI теперь поёт тексты, которые вы написали сами, точно как написано, заполняет Song Brief из 250 видимых стилевых шаблонов, отбрасывает ноты источника кавера новым ползунком и позволяет креативности доходить до 200. Продолжение Plenio 1.0 вышло 1 ноября.
Plenio 1.5 запускает сессию вечеринки из Plenio Player

Plenio сохраняет ту же форму, что была в 1.0: бриф, локальная языковая модель, которая пишет название, стиль и текст, Song Sheet, показывающий ровно то, что получает музыкальная модель, исполнение от YuE2-3B или MiniMax Music 3, затем мастеринг и релиз с размеченными файлами, синхронизированным текстом и нотами. Что меняется в 1.5, так это то, какую часть этого пути вы держите в своих руках.

Что нового в 1.5

ИзменениеЧто оно делает
Ваши собственные текстымой собственный, поётся как написано в Song Brief: писатель заполняет только стиль, промпт для обложки и название
Шаблоны, которые видно250 стилевых шаблонов теперь записывают свои значения в поля брифа, которые являются списками значений шаблонов
Креативность до 200100 становится значением по умолчанию, 101-150 экспериментальное, 151-200 авантюрное
Более свободные каверыПолзунок оригинальные ноты прореживает инструментальную линию и аккорды источника, ничего не сочиняя заново
Собственные теги секцийВосемь секций, которые выучил YuE2, в виде кнопок, ещё 8, которые Plenio подгоняет под свой план, и теги, которые придумаете вы
Место для думающих моделейКаждый ответ LLM может занимать 16 384 токена при контексте 24 576 токенов

Тексты, которые вы написали, поются как написано

Song Brief с выбором текста «мой собственный, поётся как написано ниже», введены куплет и припев

Song Brief с выбором текста «мой собственный, поётся как написано ниже»: введены куплет и припев.

В вокальном Song Brief теперь есть выбор между написано по идее ниже, что является значением по умолчанию, и мой собственный, поётся как написано ниже. Во втором режиме писатель создаёт только название, стиль и промпт для обложки: слова остаются точно такими, как введены, включая теги секций. Без тегов каждый блок строк становится куплетом, а повторяющийся блок превращается в припев, и название берётся из текста, а не из жанра. Тот же выбор есть в форме Make a song в Plenio Player, так что гость со смартфона тоже может вставить текст.

Шаблоны, которые заполняют бриф

Выбор стилевого шаблона в Song Brief с открытым списком жанров

Поле жанра открыто: введите свой вариант сверху, затем все жанры, которые знают 250 шаблонов.

Раньше выбор шаблона копировал блок текста. В 1.5 он записывает свои значения в бриф: описание, жанр, настроение, темп, тональность, размер, язык, голос, тему, идею текста и ведущий инструмент, а также свои вокал, длину и мелодию. Второй шаблон заменяет только то, что было вставлено шаблоном, и сохраняет то, что вы изменили, а очищенное поле снова получает значение шаблона. Каждое поле теперь представляет собой список того, что знают все шаблоны, а сверху есть ✎ введите своё для всего остального. Описание шаблона говорит, как звучит песня, а новое поле lyrics говорит, о чём она.

Добавлено одиннадцать шаблонов для случаев и жанров, которых не было: песня на день рождения на английском и немецком, party-Schlager, немецкая карнавальная песня, первый танец на свадьбе, песня в стиле Liedermacher, поп-рок, мелодичный трэп, латин-поп, J-rock и итальянский поп, всего 250.

Креативность до 200

Значение креативности по умолчанию теперь 100: экспериментальная настройка, которая, по словам автора, давала лучшие песни, а все значения до 100 сохраняют прежний смысл, поэтому сохранённый рабочий процесс 1.4 с 50 по-прежнему пишет и делает выборку на 50. Выше этого 101-150 остаются экспериментальными с более свободной выборкой, а 151-200 называются авантюрными: свежий микс с явным оттенком другого жанра, характерным инструментом или неожиданным поворотом в тексте. На 200 выборка YuE2 выкручивается до plan 1.0 / 0.96 / 64 и take 1.15 / 0.98 / 200, что в списке изменений названо границей того, что, по сообщениям, остаётся связным.

Более свободные каверы

В Cover Brief появляется оригинальные ноты (0-100, по умолчанию 100): сколько нот источника сохраняет партитура. Меньшие значения шаг за шагом отбрасывают ноты инструментальной линии и аккордов, вплоть до примерно четверти при 0, при этом ноты на сильных долях и первый аккорд каждой секции остаются. Ничего нового не сочиняется, поэтому кавер не может придумать материал, которого ему не дали. Мелодия вокального кавера сохраняет все ноты, чтобы слова продолжали петься: проект замерил 78 процентов услышанных слов при 0 против 83 процентов при 100. В сводке сообщается, сколько нот сохранено.

Теги секций, которые вы можете задать

Кнопки редактора текста теперь представляют собой восемь секций, которые выучил YuE2: [Intro], [Verse], [Pre-Chorus], [Chorus], [Bridge], [Interlude], [Instrumental] и [Outro]. Кнопка more добавляет теги, которые Plenio подгоняет под план YuE2 ([Post-Chorus], [Hook], [Refrain], [Solo], [Break], [Breakdown], [Drop], [Build]), а + your tag сохраняет ваши собственные теги, такие как [Violin Rise] или [Choir], для всех последующих песен. При наличии слов пользовательский тег поётся на своей секции; без слов он становится инструментальной частью. Тег с символами, которых нет в названиях секций партитуры, больше не останавливает запуск, что в списке изменений указано как исправление.

Больше места для думающих моделей

Каждый ответ LLM теперь может доходить до 16 384 токенов при контексте 24 576 токенов, вместо 6 144, 2 048 и 1 024 в черновике писателя, аранжировке и проверке ослышанных слов, в нативной генерации текста ComfyUI и в ноде Local LLM. Это оставляет место для рассуждений думающей модели перед её ответом, ценой более высоких требований к контексту: модели LM Studio теперь нужно минимум 24 576. Сохранённые рабочие процессы подхватывают новые длины при открытии, а Song API 1.3 предоставляет новые поля lyrics_from, lyrics, original_notes и creativity до 200, при этом старые промпты API работают без изменений.

Как получить Plenio 1.5

### Обновите пакет нод Найдите Plenio Music Production System в ComfyUI Manager или выполните comfy node install comfyui-plenio-music. Пакету нужен ComfyUI 0.37.0 или новее, и он не добавляет собственных пакетов Python.

Проверьте машину

Откройте 0 · System Check в браузере шаблонов: он сообщает версию ComfyUI, GPU и файлы моделей, которые ещё нужны каждому шаблону.

Выберите маршрут

YuE2 · Song для вокальной песни по брифу, YuE2 · Cover для переработки записи, MiniMax · Song для рендера по описанию или YuE2 · DAW, чтобы написать мелодию самому.

Релиз 1.5.0 на GitHub находится здесь, а полный список изменений приведён в CHANGELOG.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…
Plenio 1.5: свои тексты, шаблоны и креативность до 200 | ComfyUI Wiki