Нейросети «Яндекс Музыки» научились сводить треки в DJ-сеты

К примеру, прошлым летом у стриминга случилась коллаборация с «Шедеврумом» — еще одним проектом «Яндекса», который генерирует изображения и видео по текстовому запросу. Теперь «Шедеврум» может создавать клипы с треками из «Яндекс Музыки». Это полезная функция для артистов: можно генерировать обложки, видеошоты и другой креатив. А новый ИИ-инструмент разработчики посвятили слушателям. Отныне они могут включать персональные DJ-сеты, собранные по их интересам. 

Новая функция называется «AI-сеты Моей волны». Она доступна всем подписчикам «Яндекс Плюса». Работает инструмент следующим образом: нейросетевая технология сведения треков подбирает музыку в «Моей волне» персонально для каждого пользователя. А затем песни сводятся в единый динамичный DJ-сет. В отличие от обычного потока треков здесь — плавное звучание, переходы и гармоничное сочетание композиций. Звучит так, будто музыку действительно сводит диджей.

Добиться такого звучания удалось благодаря аудиомодели, которая тщательно анализирует структуру треков, их такты, ритм и вокал. Затем с помощью нейросетей и алгоритмической обработки отбираются самые яркие фрагменты песен, и в дело вступает следующая нейросеть. Она аккуратно сводит треки, накладывая друг на друга так, чтобы получился цельный музыкальный поток. 

Сейчас «AI-сеты Моей волны» доступны по семидесяти с лишним жанрам электронной музыки: от техно и хауса до драм-н-бейса и джангла. Выбирать музыку можно под конкретные занятия. Например, для вечеринок или тренировок. Опробовать инструмент уже можно на главной странице мобильного приложения «Яндекс Музыки». Но вскоре «AI-сеты» появятся и на других платформах стриминга: в веб-версии, десктопном приложении и на умных колонках.