Снятое фото
Stable Diffusion 3D
400

О модели

Stable Diffusion 3D — это набор инструментов и расширений, которые переносят возможности генеративной системы Stable Diffusion в область 3D. Это не отдельная модель, а совокупность методов для синтеза новых видов, генерации 3D-сеток по одиночному изображению и улучшения 3D-визуализаций и многовидовых видео. Пользователи могут создавать орбитальные видео или видео с заданной траекторией камеры, получать согласованные по видам многокадровые результаты и извлекать либо уточнять 3D-сетки из одной фотографии. Также доступны режимы доработки изображений (img2img и inpaint) для добавления реалистичных деталей в готовые 3D-рендеры — это экономит время, позволяя улучшать части сцены без повторного полного рендера. Для создателей это означает более быстрый цикл итераций при создании игровых ассетов, прототипов VR/AR, продуктов и архитектурных визуализаций: можно генерировать альтернативные ракурсы, получать базовые сетки для дальнейшей доработки и создавать короткие многовидовые видео для презентаций. Для исследователей и инженеров по компьютерному зрению внутренние признаки Stable Diffusion полезны для задач анализа сцены (глубина, опорные соотношения, освещение). Семейство методов предлагает компромисс между качеством и скоростью: есть варианты для высокодетализированных результатов и более быстрых выводов, а также технологии разделённого освещения и оптимизации для реалистичных сеток. Ограничения остаются: полностью точная реконструкция сложных 3D-объектов из одного изображения может требовать дополнительной оптимизации или ручной доработки, а распознавание материалов и окклюзий уступает специализированным моделям. Некоторые продвинутые настройки (трассировка камеры, оптимизация сетки) требуют технических навыков. В целом Stable Diffusion 3D отлично подходит художникам, специалистам по визуализации и исследователям, которым нужны практичные, качественные многовидовые и 3D-воркфлоу для интеграции в существующие пайплайны.

Преимущества

Мультимодальный
Высокое качество
Согласованность видов
Быстрая генерация
Поддерживает загрузку файловв
Поддержка референсов

Настройки

Разрешение текстуры-  Определяет разрешение текстур, используемых для карты альбедо (цвета) и карты нормалей. Более высокое разрешение обеспечивает более детальную и точную визуализацию поверхностей, но приводит к увеличению размера файлов.
Соотношение переднего плана-  Контролирует количество отступов вокруг объекта в кадре. Более высокое соотношение означает меньше отступов и больший объект, в то время как более низкое соотношение увеличивает отступы, уменьшая размер объекта в кадре.
Алгоритм перестроения сетки-  Контролирует алгоритм перестроения сетки для генерации 3D модели. 'None' означает отсутствие перестроения, 'triangle' создает треугольные грани, 'quad' создает четырехугольные грани, подходящие для инструментов DCC.
Количество вершин-  Если указано, результат будет содержать приблизительно такое количество вершин в упрощенной сетке. Установка значения -1 означает отсутствие ограничений.