Video Outpainting в Runway Gen-3 Alpha Turbo.
Вот это уже интересно по многим причинам.
Переделать лежачее видео в стоячее.
Отъехать камерой назад и вернуться обратно в кадр.
Сделать несколько outpaint отъездов и получить суперзум обратно.
Сделать несколько outpaint отъездов и поелозить панорамой по кадру.
Перекадрироваться.
Выпить за маттэ пейнтеров.
Новые композиции кадра с разными промптами на расширение кадра.
Самое интересное - как я понял при дорисовке кадра снаружи(outpaint) можно использовать не только промпт, но и reference image(s?)!!
Я подумал про то, насколько далеко до inpainting (принцип тот же) и в воздухе отчётливо запахло нейрокомпозом.
А соединив это с успехами Segment Anything мы можем получить этакий Omnigen, но только для видео.
И вот уже сидят композеры в своих темных комнатах и орут в мониторы "замени фон на лес, а персонажу перерисуй коня на верблюда и пол поменяй по дороге, на противоположный".
И все это для видео.
Куда катится мир?
@cgevent