Сервис GigaChat от "Сбера" теперь умеет создавать музыку по текстовому запросу

"Сбер" представил новую функцию своего сервиса GigaChat, позволяющую пользователям создавать уникальные музыкальные композиции, основанные на текстовых описаниях. Это открывает перед пользователями возможность получить оригинальное музыкальное произведение, задав всего лишь описание желаемого стиля и настроения, например, «веселая музыка в стиле кантри» или мелодию, подходящую для фонового сопровождения в бизнес-центре.

Процесс создания музыки в GigaChat проходит в несколько этапов. Сначала текстовый запрос пользователя преобразуется в язык, понятный генератору мелодий, с помощью модели CLaMP. Затем SymFormer, получив информацию о стиле, приступает к генерации нескольких вариантов мультидорожечной композиции, из которых выбираются наиболее подходящие. Финальный этап заключается в рендеринге аудиофайла, который затем предоставляется пользователю.

Обучение SymFormer для создания музыки проводилось на суперкомпьютере Christofari, используя обширный датасет из более чем 200 тысяч треков различных жанров, что позволило создать надежную модель, способную генерировать композиции с высоким уровнем разнообразия и качества. Стоит отметить, что сервис предоставляет не только аудиофайл, но и соответствующую музыкальную партитуру в формате MIDI, совместимую с различными цифровыми аудиорабочими станциями, что дает возможность дальнейшего редактирования и адаптации композиции.

Такие возможности GigaChat найдут применение не только среди музыкантов и композиторов, но и в бизнес-среде. Предприятия малого и среднего бизнеса смогут использовать сервис для создания фоновой музыки для своих заведений или мелодий для рекламных материалов. Это предоставляет бизнесу шанс на быстрое и законное решение своих музыкальных потребностей.

Напоминаем, что ранее в рамках Восточного экономического форума во Владивостоке нейросеть SymFormer уже продемонстрировала свой потенциал, выступив с оркестром Мариинского театра Приморской сцены. В ходе исполнения симфонии "Космос" композитора Петра Дранга нейросеть контролировала экспрессивность произведения и импровизировала в реальном времени, открывая новые горизонты в совместном творчестве человека и искусственного интеллекта.