pimenov.ai

Google научил музыкальный ИИ играть вживую — прямо на макбуке

Продолжаю следить за музыкальным ИИ. Google выложил Magenta RealTime 2 — открытую модель, которая играет музыку в реальном времени и локально, прямо на MacBook.

ОбзорИнструменты

Я тридцать лет продюсирую музыку и давно слежу за тем, что происходит в музыкальном ИИ. До сих пор он умел одно: ты пишешь запрос в Suno или Udio, ждёшь, забираешь готовый трек. Красиво, но это всё равно офлайн-кухня, где ты заказал блюдо, постоял в стороне и забрал.

На днях Google выложил Magenta RealTime 2, и кухня превратилась в живой джем. Модель отвечает за 200 миллисекунд, это тот самый порог, за которым человек уже не слышит задержки. Нажал клавишу, и она тут же подхватила ансамблем. Первая версия думала около трёх секунд и требовала отдельного TPU, а новая работает локально на Apple Silicon: базовая заводится на M3 Pro, а маленькая вообще на MacBook Air.

И всё это опенсорс. Ставится одной строкой через pip, есть плагин для DAW, лежит на Hugging Face. Никакого «когда-нибудь в облаке за деньги»: прямо сейчас, на своём ноутбуке.

Впервые музыкальный ИИ играет вместе с тобой в реальном времени, как живой музыкант в комнате. Слежу дальше.

Кто хочет потрогать сам: страница проекта и код на GitHub.


По теме

Если вы продюсируете музыку или собираете на базе ИИ собственные инструменты, локальный realtime открывает сценарии, которые ещё вчера жили только в облаке.

Если захотите обсудить, как это применить у себя или в команде — пишите в Telegram @pimenov