Так коротко по TripoSR!
Оказалось все круче чем я думал ну и еще обновилось все >_< (LayerDiffuse тоже теперь он работает с sd1.5)
И так у нас есть доступ к цветам для модели obj просто они записаны в vertices.
А значит в блендере мы сможем получить к ним доступ. Достаточно зайти в Shader Editor сделать новый материал и нажав Shift+A выбрать Input>Attributes и выбрать color. Также в модели есть карта Normal. Вот такие дела так что мы реально можем генерировать не самые плохие 3D модели просто по тексту или по картинки. О дивный новый мир)
Обновленный воркфлоу скину в комментарии. И для большего количества полигонов в Mesh увеличьте geometry_resolution.