В блоге Яндекса рассказали о новой функции оживления фотографий с помощью нейросети, которая доступна в приложении Алиса. Для этого нужно отправить изображение в чате, ввести запрос для описания сюжета, после чего ИИ сгенерирует нужное видео длительностью 4 секунды.
Нейросеть комбинирует физически правдоподобное поведение объектов в кадре со стилистикой исходного изображения. Благодаря этому получается оживить любые изображения: начиная от старых фото или известных картин, заканчивая детскими рисунками.
В чате с Алисой создаются видео с разрешением 480p, чего достаточно для большинства задач. В видео сохраняется соотношение сторон как в исходном изображении. А чтобы продемонстрировать, что контент создала нейросеть, в конце каждого видео добавляется кадр с логотипом Алисы.
Пример запроса и получившееся видео
Пользователи смогут скачать готовый контент или поделиться им с помощью ссылки. Также есть возможность сохранения нескольких видео для монтирования из них видеоряда.
Для реализации этой функции был выбран и оптимизирован код модели, анимирующей изображения. На создание видеороликов уходит от 20 секунд, в зависимости от общей нагрузки на нейросеть. Кроме того, контент проверяется на соответствие правилам сервиса с помощью визуально-языковой модели Яндекса (VLM). Например, при тестировании нами сервиса нейросеть отказалась оживить старую фотографию с лицами, сообщив, что такой контент нарушает правила пользования ИИ.
Если же созданное видео покажется пользователю некорректным или не соответствующим запросу, рекомендуется сообщить о проблеме через форму обратной связи.
Новая функция доступна бесплатно всем пользователям из России в приложении Алиса. В будущем эту функцию планируют добавить на сайте alice.yandex.ru, в приложении Яндекс с Алисой и в Яндекс Браузере.
Комментарии