Спасибо за участие в моих лекциях на Хлеб Заводе и в Строгоновке. Сегодня обсудим две новинки для ComfyUI: layerdiffuse и TripoSR от Stability AI.
Модель TripoSR от Stability AI (
модель.
ComfyUI нода) позволяет создавать 3D модели по изображениям. Правда, TripoSR пока что не впечатляет качеством и выглядит местами примитивно. Но она работает быстро. Пока что модель генерирует только OBJ без цвета. Но за время написания поста уже появляются обновы следим.
Layerdiffuse позволяет генерировать изображения на прозрачном фоне, но работает только с SDXL. Он интересно работает с полупрозрачными эффектами.
Поэкспериментировал с использованием layerdiffuse в сочетании с
Controlnet и
Animatediff для создания анимированных сиквенций на прозрачном фоне, но качество в этом случае сильно снижается.
Объединив layerdiffuse и TripoSR: можно сначала создать изображение с layerdiffuse, а затем преобразовать его в 3D модель с помощью TripoSR.
Workflows и результаты я скину в комментариях. для
ComfyUI советую
Manager