«Яндекс» представил функцию создания коротких видеороликов в «Шедевруме»
Компания "Яндекс" анонсировала обновление для своего мобильного приложения "Шедеврум", добавив функционал создания коротких видеоклипов с использованием технологии генеративной нейросети. Это стало значимым шагом для российского рынка, так как подобные возможности стали доступны широкому кругу пользователей.
Теперь, чтобы произвести видеоролик в "Шедевруме", пользователи могут просто ввести текстовое описание желаемой сцены. В ответ приложение предложит выбор из четырех вариантов начального кадра и предоставит коллекцию анимационных эффектов для придания движения. Доступны семь различных эффектов: зум, таймлапс, полёт, панорама, вращение, подъём и морфинг, что позволяет пользователю добавлять динамику в видеоконтент.
Процесс создания изображений для видео базируется на методе каскадной диффузии, который позволяет "Шедевруму" генерировать отдельные кадры, начиная с низкого разрешения и постепенно дополняя их деталями до высокого качества.
Приложение способно создавать видео продолжительностью в четыре секунды и кадровой частотой 24 кадра в секунду, которые затем можно распространять среди друзей или сохранять в формате MP4. Новая функция пока что находится в стадии тестирования и доступна для активных пользователей в последней версии "Шедеврума".
"Шедеврум" был запущен в апреле 2023 года для устройств на базе Android и iOS. Приложение работает на основе нейронной сети с 5 миллиардами параметров, обученной на основе 330 миллионов изображений с текстовыми описаниями. Разработчики планируют продолжить обучение нейросети и ее интеграцию в другие сервисы и продукты "Яндекса".
