Remiqora
  • Открытый код · Работает локально
  • Новое: Из идеи · Stable Audio 3
  • Windows · NVIDIA CUDA
  • macOS · Apple Silicon

Создано с AI.
Сделано тобой.

Remiqora — локальная музыкальная студия. ACE-Step 1.5, YuE2-3B и Stable Audio 3 генерируют трек по вашему промту или по одной фразе, Demucs делит его на стемы, ИИ-аранжировщик дописывает подходящие партии, а многодорожечный редактор в браузере сводит результат. Всё работает на вашем компьютере.

Открыть на GitHubСмотреть демо

  1. Из идеи
  2. Генерация
  3. Стемы
  4. Аранжировка
  5. Сведение
ИИ-аранжировщик в DAW
Редактор с четырьмя дорожками стемов и панелью ИИ-аранжировщика: «Добавить партию», выбран инструмент «Струнные», описание партии и дорожки, которые слышит модель
Рэк эффектов
Рэк эффектов канала барабанов: эквалайзер, динамика, фильтр, хорус, дилей, реверб и искажение включены
Разделение на стемы
Панель стемов: вокал, барабаны, бас и остальное, кнопки «Пересоздать», «Открыть в редакторе» и «Удалить»

Послушайте, как собирается песня

Всё здесь сделано в Remiqora для этой страницы. ACE-Step 1.5 написал песню по одному запросу, Demucs разделил её на четыре стема, а ИИ-аранжировщик дописал поверх три варианта струнных. Включите воспроизведение, заглушите или выделите стемы и включите струнные прямо на ходу.

0:00 / 0:42
0:000:100:200:300:40
Вокал
Барабаны
Бас
Остальное
СтрунныеИИ-аранжировщик
Струнные от ИИ-аранжировщика
Песня
energetic pop rock, powerful female vocal, punchy live drums, driving bass, crunchy electric guitars, anthemic chorus, 128 bpm, no strings

ACE-Step 1.5 turbo сделал три варианта по 1:40 примерно за 15 секунд, когда модель уже загружена. Здесь звучит один из них, без обработки.

Струнные
driving staccato string section, rhythmic violins and cellos, energetic, building into the chorus

ИИ-аранжировщик слышал весь микс и написал три варианта примерно за 40 секунд на base-модели. Они звучат на 6 дБ тише, как если бы вы опустили фейдер.

Время указано для RTX 4080 с 16 ГБ. Текст песни написан для этого демо; на английской странице своя песня по тому же запросу.

Четыре запроса, четыре трека

Первый вариант по каждому запросу, как его выдал ACE-Step 1.5 turbo: без правок и сведения. Каждый запуск давал два варианта по минуте примерно за 10 секунд на RTX 4080. Здесь по 30 секунд из каждого.

  1. deep house, rolling bassline, warm analog pads, crisp hi-hats, four on the floor, 122 bpm

    Инструментал, 0:30

  2. lo-fi hip hop, dusty boom bap drums, mellow Rhodes chords, vinyl crackle, upright bass, 80 bpm

    Инструментал, 0:30

  3. cinematic orchestral, soaring strings, french horns, taiko and timpani, epic build

    Инструментал, 0:30

  4. russian indie rock, male vocal, jangly electric guitars, driving drums, bass, energetic

    С текстом на русском, 0:30

От запроса до сведения

  1. Начните с идеи

    Напишите одну фразу: о чём песня, какое настроение, для кого она. Локальная языковая модель напишет промт в формате выбранного движка, с тегами стиля, текстом, темпом и тональностью, и его можно поправить перед генерацией. Попросите дождь по стеклу, и Stable Audio 3 сделает звук, а не песню.

    Из идеи: идея в одну строку, выбор движка и промт от помощника со стилем, текстом, темпом и тональностью
    Промт, который помощник написал по одной фразе

  2. Генерация

    Опишите музыку или задайте стиль и текст. ACE-Step 1.5, YuE2-3B и Stable Audio 3 работают в одном интерфейсе: выберите модель в шапке, и Remiqora запустит её, а другую остановит, поэтому хватит одной видеокарты.

    Форма генерации: выбор пресета, описание, длительность и число вариантов
    Форма генерации и библиотека треков

  3. Разделение на стемы

    Одна кнопка разделяет любой трек на вокал, барабаны, бас и остальное с помощью Demucs. «Открыть в редакторе» отправляет все четыре стема в новый проект.

    Панель стемов: вокал, барабаны, бас и остальное, кнопки «Пересоздать», «Открыть в редакторе» и «Удалить»
    Четыре стема, у каждого свой плеер и скачивание

  4. Новые партии от ИИ-аранжировщика

    Выберите инструмент и дорожки, которые должна слышать модель: она напишет барабаны, бас, струнные или вокал в их темпе и тональности. Ещё он перерисовывает участок, продолжает трек и делает кавер в другом стиле. Каждый запуск даёт 2–4 варианта на отдельных дорожках, остаётся лучший.

    Редактор с четырьмя дорожками стемов и панелью ИИ-аранжировщика: «Добавить партию», выбран инструмент «Струнные», описание партии и дорожки, которые слышит модель
    ИИ-аранжировщик рядом с проектом из четырёх стемов

  5. Сведение в редакторе

    Обрезайте, разрезайте и делайте фейды, зацикливайте фрагмент, привязывайтесь к сетке BPM и подгоняйте клип под темп проекта без изменения тональности.

    Таймлайн редактора: четыре цветные дорожки стемов с ползунками громкости, выбрана дорожка барабанов, индикаторы мастера и кнопки панелей
    Таймлайн с четырьмя дорожками стемов, выбрана дорожка барабанов

  6. Экспорт

    Отрендерите микс в WAV или MP3 прямо в браузере, и он сохранится в библиотеке, или выгрузите каждую дорожку с проектом Reaper или файлом DAWproject, чтобы закончить в своей DAW.

Полноценный рэк эффектов на каждом канале

На каждой дорожке и на мастер-шине стоят одни и те же восемь эффектов, все работают в реальном времени: эквалайзер, компрессор, фильтр, хорус, дилей, реверб, искажение и биткрашер.

Что ещё есть

  • Stable Audio 3 для инструменталов, звуковых эффектов и сэмплов за секунды (Powered by Stability AI)
  • Обучение LoRA для ACE-Step прямо в интерфейсе
  • Извлечение мелодии SheetSage2 и перевод аудио в MIDI через MuScriptor
  • Отмена и повтор на 30 шагов и подробная справка по каждому разделу
  • Интерфейс на 20 языках, по умолчанию на языке системы
Рэк эффектов канала барабанов: эквалайзер, динамика, фильтр, хорус, дилей, реверб и искажение включены
Канал дорожки барабанов

Говорит на вашем языке

Интерфейс, встроенные руководства и установщик доступны на 20 языках, китайский в двух начертаниях, а идею песни можно описать на любом из них. Remiqora открывается на языке системы, переключатель в шапке меняет его.

Опишите песню на своём языке

  • Напишите идею по-испански, по-арабски, на хинди или казахском: Remiqora определит язык по буквам и словам, а локальный ассистент напишет на нём текст.
  • Язык песни можно выбрать и вручную из 51 языка вокала.
  • Арабский, фарси и иврит зеркалятся справа налево. Таймлайн, волна и микшер остаются слева направо, как время и ход сигнала.

Проверено на каждом языке

  • Мы написали идею на каждом языке и посмотрели, что ответил ассистент: текст возвращался на этом языке каждый раз.
  • Для каждого языка мы сгенерировали по короткой песне в ACE-Step и в YuE2 и прогнали их через распознавание речи Whisper. YuE2 в среднем спел около 90 % слов, ACE-Step чуть больше половины, и по языкам разброс большой. Это выборка, а не обещание.
  • Казахский тоже работает: ACE-Step его в списке не указывает, но поёт, с акцентом.

Все языки, кроме русского и английского, переведены машинно, и носители их не вычитывали, поэтому некоторые фразы звучат странно. Нашли такую? Напишите на GitHub.

Или настольное приложение

На Windows и на Mac с Apple Silicon Remiqora есть и в виде установщика. Он открывается в своём окне и при первом запуске сам всё настраивает: без Git, без Python, без компилятора.

Скачать для WindowsСкачать для macOS

Версия 0.5.0, предрелиз. Windows: видеокарта NVIDIA. macOS: Apple Silicon. См. все файлы и суммы SHA-256.

  • Проверяет видеокарту, драйвер и место и спрашивает, что установить: ACE-Step всегда (около 18 ГБ), а YuE2, разделение на стемы, Stable Audio 3, помощник промтов и модели ИИ-аранжировщика по желанию, с размером каждого.
  • Всё, что не поставили, видно как «не установлено» с кнопкой, которая докачает это позже, пока приложение работает.
  • Закрытие окна останавливает серверы моделей и освобождает видеокарту.
  • Модели, проекты и логи остаются в этой папке. Ничего никуда не отправляется.

Построено на Electron вокруг того же веб-интерфейса. Первый запуск использует uv для Python, готовый движок audio.cpp (CUDA или Metal) и FFmpeg.

Экспериментально. Установщики пока не подписаны: Windows покажет предупреждение SmartScreen, а macOS может попросить разрешить приложение. Хотите собрать сами? Шаги описаны в папке desktop.

Как устроено настольное приложение

Экран первого запуска: проверены видеокарта, драйвер, место и соединение, выбор компонентов с размерами и папка для моделей и проектов
Первый запуск: приложение проверяет компьютер и спрашивает, что установить
Загрузка и установка компонентов, общий прогресс и прогресс по каждому
Затем скачивает и ставит компоненты, с прогрессом

Что стоит знать перед установкой

Работает сегодня

  • Windows с видеокартой NVIDIA (CUDA). Проверено на RTX 4080 16 ГБ.
  • macOS на Apple Silicon. Проверено на M5 с 24 ГБ; путь новее и медленнее, чем на Windows.
  • Linux x86_64 с видеокартой NVIDIA — скриптами силами сообщества.
  • Разделение на стемы, транскрипция в MIDI и редактор.

Ограничения

  • Установщика для Linux пока нет — запуск из исходников через скрипты.
  • По умолчанию движки работают по очереди.
  • Качество звука определяют сами модели.
  • Установщики настольного приложения экспериментальные и без подписи.
  • Активная разработка: пока все релизы предварительные.
  • Лицензии: Remiqora и ACE-Step 1.5 — MIT, а веса YuE2-3B распространяются под CC BY-NC 4.0, то есть без коммерческого использования, а Stable Audio 3 бесплатен для коммерции только при выручке до $1 млн в год.

Установка

Со скриптами нужен Git, остальное они поставят; все параметры и решения проблем описаны в README. Не хотите терминал? Возьмите настольное приложение выше.

Windows с видеокартой NVIDIA

git clone https://github.com/inikolax/remiqora.git
cd remiqora
setup_prereqs.bat
setup_models.bat
dev.bat

Драйвер NVIDIA поставьте сами: скрипт его не трогает. Модели скачиваются около 10 ГБ.

macOS с Apple Silicon

git clone https://github.com/inikolax/remiqora.git
cd remiqora
./setup_prereqs.sh
./setup_models.sh
./dev.sh

Используется готовая Metal-сборка YuE2, компилятор не нужен.

Linux x86_64 с видеокартой NVIDIA

git clone https://github.com/inikolax/remiqora.git
cd remiqora
./setup_linux.sh
./prod_run_linux.sh

Сделано силами сообщества. Собирает audio.cpp из исходников, поэтому кроме драйвера нужен CUDA toolkit (nvcc, cuBLAS, cuFFT). Проверено на Ubuntu 24.04.

Полное руководство по установке

Частые вопросы

Remiqora бесплатная?

Да. Это открытый код под лицензией MIT: без аккаунта, без подписки и без ограничений на число треков. Всё работает на вашем компьютере, так что платите вы только за электричество.

Работает ли без интернета?

После разовой загрузки моделей — да: генерация, разделение на стемы, ИИ-аранжировщик и редактор работают на вашем компьютере без сети. Своей телеметрии в Remiqora нет, запросы и треки никуда не отправляются.

Какое нужно железо?

Windows или Linux с видеокартой NVIDIA либо Mac на Apple Silicon. Проверено на RTX 4080 с 16 ГБ и на Mac с M5 и 24 ГБ. Для карт с 8 ГБ у YuE2 есть сборка q4_0, сборке q8_0 нужно около 9 ГБ, а необязательной модели XL base — 16 ГБ. Места на диске нужно 18 ГБ только под ACE-Step и до 80 ГБ под всё вместе со Stable Audio 3 и помощником промтов.

Можно ли использовать музыку в коммерческих целях?

Зависит от модели, которая сделала трек. ACE-Step 1.5 под лицензией MIT, и его авторы разрешают коммерческое использование. Веса YuE2-3B распространяются под CC BY-NC 4.0, поэтому треки из YuE2 — только для некоммерческого использования. Веса Stable Audio 3 распространяются под Stability AI Community License: коммерческое использование, в том числе сгенерированного звука, бесплатно для людей и компаний с годовой выручкой меньше $1 млн после бесплатной регистрации в Stability AI; при большей выручке нужна лицензия от Stability AI. Перед публикацией сверьтесь с актуальной лицензией модели; авторы ACE-Step также предупреждают о риске случайного нарушения авторских прав.

Чем это отличается от Suno или Udio?

Suno и Udio — облачные сервисы со своими моделями. Remiqora запускает открытые модели на вашем компьютере: без кредитов, без очереди, ничего не загружается на сервер. Вместо одного готового файла вы получаете стемы, многодорожечный редактор и ИИ-аранжировщика, поэтому песню можно собирать по партиям и доводить в своей DAW. В некоторых жанрах облачные сервисы пока звучат более отполированно.

Работает ли на Mac и Linux?

Для Mac на Apple Silicon есть установщик; Mac на Intel не поддерживаются. На Linux с видеокартой NVIDIA Remiqora запускается из исходников скриптами установки, отдельного установщика пока нет.

Остался вопрос? Задайте его в issues на GitHub.