Компания Яндекс запустила бета-версию нейросети YandexART (Vi), которая способна генерировать короткие пятисекундные видеоролики с плавными и реалистичными движениями объектов. Новая технология уже доступна пользователям в приложении «Шедеврум».
YandexART (Vi) может воспроизводить естественные движения в кадре, такие как бег собаки, падение листа или взрыв фейерверка. В отличие от предыдущей версии, выпущенной в августе прошлого года, новая модель научилась не только плавно двигать камеру, но и анимировать сами объекты, что делает видео более цельными и реалистичными. Ранее объекты могли значительно изменяться от кадра к кадру, что влияло на качество анимации.
Для обучения YandexART (Vi) использовались видеозаписи с движущимися объектами, такими как автомобили или животные. Это позволило нейросети освоить сложные последовательности кадров и обеспечивать плавность видео.
Пользователю достаточно ввести текстовое описание сцены и нейросеть создаст начальное изображение, а затем превратит его в анимацию. Процесс создания основан на постепенном превращении цифрового шума в последовательность кадров. При этом YandexART (Vi) будет актуальна как для обычных пользователей, так и для профессионалов, отмечают в компании.
