Нейросеть YandexART научилась создавать видео объектов в движении
Компания «Яндекс» представила бета-версию нейросети YandexART (Vi) для создания пятисекундных видео. Модель научилась воссоздавать реалистичные движения объектов, а также учитывать связь между кадрами.
Теперь технология создает картинку, с которой будет начинаться анимация, и постепенно превращает цифровой шум в последовательность кадров. Они и образуют плавное видео, сменяя друг друга незаметно для пользователя.
Прошлая модель позволяла получать анимации только с движением камеры, а не объекта. Новые возможности доступны в приложении «Шедеврум».
«Яндекс» запустил YandexART в октябре 2023 года. Диффузионная нейросеть создает и улучшает изображения и анимацию, а также обрабатывает загруженные фотографии в ответ на текстовые запросы.
В августе 2024-го модель отреставрировала кинохронику прошлого века — ее использовали для сериала «Игры» об Олимпиаде 1980-х годов.
Источник: пресс-служба «Яндекса»