Друзья, очередной небольшой шажок в развитии нейросетей: отечественная рисующая нейросеть YandexART от Яндекса теперь генерирует короткие видео. Специализировавшаяся ранее на генерации изображений по пользовательским текстовым описаниям нейросеть YandexART расширила свои возможности, пополнившись моделью генерации анимации YandexART (Vi). Новая модель позволяет нам, пользователям создавать пятисекундные видеоролики на основе наших текстовых описаний. И применять к этим видеороликам различные современные эффекты анимации.

↑ YandexART и YandexART (Vi)

YandexART - это бесплатная нейросеть от Яндекса, генерирующая изображения методом каскадной диффузии. Создаёт качественные и реалистичные детализированные изображения в разных стилях и тематиках по пользовательским запросам. Полноценно использовать возможности YandexART можно в мобильном приложении «Шедеврум» от Яндекса. Также YandexART интегрирована в ИИ-ассистента Алису в десктопном Яндекс.Браузере, здесь генерация изображений выполняется путём запросов к Алисе.

YandexART (Vi) — это новая модель нейросети от Яндекса, предназначенная для создания коротких видеороликов с движущимися объектами. Модель недавно представлена в бета-версии и доступна для использования в мобильном приложении «Шедеврум».

YandexART (Vi) использует текстовые описания для создания видеороликов. Мы, пользователи вводим запрос, описывающий объекты, их состояние, действия, трансформации и т.п. Нейросеть же генерирует видеосцены с плавными движениями объектов, как если бы это было реальное видео, созданное профессионалами в области съёмки, монтажа и создания видео. Можем сгенерировать видео текущего водопада, бежащей лошади, колышущихся на ветру или падающих с деревьев листьев, вращающейся Земли, трансформирующихся объектов, слайд-шоу и т.п.

Ролики пока что могут быть только короткими пятисекундными. С помощью YandexART (Vi) можно легко создавать интересные видеоролики для социальных сетей, мессенджеров, каких-то личных проектов. А, возможно, даже контент для использования в видеопроектах на профессиональном уровне.

YandexART примечательна возможностью создания качественных реалистичных изображений. Этой же особенностью обладает и модель генерации видео YandexART (Vi). Она может генерировать плавные и последовательные движения объектов, создавая на выходе визуально непрерывные и реалистичные видео.

↑ Как создать видео с помощью YandexART (Vi)

Мобильное приложение «Шедеврум» выполнено по типу социальной сети, где сгенерированный её пользователями контент доступен публично. В этом приложении можем зайти в раздел видеоконтента и ознакомиться с опубликованными видеороликами, сгенерированными нейросетью. Можем оценить качество роликов, посмотреть какие пользовательские запросы как работают, взять какие-то идеи для своих роликов и т.п. Для создания своего видео в приложении «Шедеврум» жмём кнопку-плюсик.

Выбираем «Видео».

Вводим текстовое описание ролика. Жмём «Создать».

После создания нам будет предложено 4 варианта первых кадров видео. Выбираем подходящий. Далее вверху выбираем эффект анимации – масштабирование, таймлайпс, отдаление, вращение или другой. Можем нажать кнопку настроек.

И указать настройки движения и поворота камеры, динамики среды кадра. По итогу жмём «Готово».

Жмём «Создать видео».

И получаем сгенерированное видео. Жмём «Готово».

Видео будет опубликовано. В меню публикации можем выбрать «Сохранить» для сохранения видео на память мобильного устройства в формате MP4.