Я пару раз уже упоминал
Hotshot в дайджестах, но оно стоит отдельного поста.
Примечателен Hotshot тем, что генерит гифки/видео на основе SDXL и его лорах, а также очень хорошо следует промту. В отличие от Runway, Pika и прочих здесь я с ходу начал получать практически то, что нужно и считай каждую генерацию сохранял себе. И это даже в
простой версии на сайте без негативных промтов и других крутилок
расширенной версии на хаггинге. Отличное понимание анатомии, без вплетения непрошенного, а также угадывание желаемых движений камеры. Есть поддержка ControlNet и надписей в кадре (мульти-контролнет в пути). А учитывая, что я видел в превью чужих генераций на сайте, цензура тут довольно лайтовая.
Внимательные подписчики нашли
гитхаб проекта и возможность генерить с помощью этой модели видео. По умолчанию Hotshot выдаёт 1 секунду в 8 FPS на 672х384, но длительность, фреймрейт, и разрешение можно менять при работе локально, например поставив 24 FPS. Можно попробовать и через Flowframes повысить фреймрейт ради интереса. А разрешение через топаз и его опенсорсные аналоги.
Сайт
Расширенная версия (HF)
Гитхаб