Музыка и звук

MusicGen (AudioCraft)

Генерация инструментальной музыки по текстовому описанию или по мелодии-образцу. Одна из первых открытых моделей такого рода.

Разработчик
Meta, США
Первый выпуск
июн 2023
Последний выпуск
ноя 2024
Размеры
300M – 3.3B
Лицензия
Только некоммерческоеКод MIT, веса CC BY-NC 4.0 — некоммерческие
Поставить на свой сервер Hugging Face GitHub

Какие задачи решает

  • Черновые музыкальные наброски
  • Музыка для прототипов роликов
  • Исследования

Где применяется

ИсследованияОбразованиеНекоммерческие проекты

Требования к железу

НоутбукНоутбук или обычный ПК, до 8 ГБ видеопамяти — младшие версии
подходит
1 видеокартаОдна видеокарта на 16–80 ГБ — средние версии
подходит
КластерСервер с несколькими видеокартами — флагманские версии
нет версий

Версии

  1. MusicGen Style и Stem
  2. MusicGen Stereo и Melody
  3. MusicGen small, medium, large

Как внедряю у заказчика

  1. ПодборВыбираю размер модели под задачу и ваше железо, проверяю на ваших примерах.
  2. УстановкаРазворачиваю на вашем сервере или в закрытом контуре, отдаю API.
  3. ДообучениеДообучаю на ваших данных (LoRA) или подключаю базу знаний — что дешевле для задачи.
  4. ВстраиваниеПодключаю к CRM, 1С, боту, сайту или рабочему чату, настраиваю мониторинг.

Похожие модели

Музыка и звукStable AudioStability AI · ВеликобританияКоммерция с условиями

Генерация коротких музыкальных фрагментов и звуковых эффектов по описанию. Третья версия разделена на модели для музыки и для звуков.

ПодробнееМузыка и звукACE-StepACE Studio и StepFun · КитайМожно в коммерцию

Быстрая генерация песен с вокалом на 19 языках, включая русский: полная песня за секунды, правка отдельных фрагментов и смена стиля.

Подробнее