Chord: Chain of Rendering Decomposition for PBR Material Estimation from Generated Texture Images
2509.09952v1
cs.GR, cs.CV
2025-09-16
Авторы:
Zhi Ying, Boxiang Rong, Jingyu Wang, Maoyuan Xu
Резюме на русском
## Контекст
В современной графике и визуализации требуется постоянно создавать и реконструировать материалы для моделирования видимости объектов. Однако эти задачи требуют больших инвестиций во время и знаний от художников. Недавние методы, основанные на визуальных фондаментальных моделях, способны синтезировать материалы с помощью ввода пользователя, но часто имеют ограничения в качестве, гибкости и контроле над процессом. Многие подходы затрудняют целевую гибкость в определении характеристик материала.
## Метод
Мы предлагаем **Chord**, новый двухэтапный подход, который включает стадию генерации и стадию оценки. В первой стадии используется оптимизированная модель диффузии для генерации размытого, изменяемого по размеру текстуры, соответствующего пользовательским требованиям. Во второй стадии мы предлагаем **Chain of Rendering Decomposition (Chord)**, схему декомпозиции, которая разделяет генерируемый материал на несколько отдельных каналов (SVBRDF) с помощью изображений-конвертеров. Эта схема применяет последовательное сглаживание и предсказание каждого канала, используя результаты предыдущих шагов как входные данные для одного шага. Наш подход демонстрирует гибкость, высокое качество и эффективность.
## Результаты
Мы проводили эксперименты с различными данными, включая генерируемые текстуры и реальные фотографии, для оценки качества. Наши результаты показали, что **Chord** превосходит существующие методы в качестве синтеза и оценки материала, обеспечивая более точные и реалистичные результаты. Мы также проверили наш подход на многих приложениях, включая обучение текстур, редактирование материала и текст-в-материал.
## Значимость
Наш подход может применяться в различных индустриях, включая визуальные эффекты, игровое производство и виртуальную реальность. **Chord** обеспечивает гибкость в определении материалов, высокое качество и эффективность. Мы видим перспективы в применении нашего подхода для повышения производительности в графической моделировании и глубокого воздействия на сферы, требующие быстрого и точного моделирования материалов.
## Выводы
Мы представляем **Chord**, новый двухэтапный подход для генерации и оценки текстур материалов. Наш подход доказал свою эффективность в синтезе и оценке материалов, предлагая новый способ решения этой проблемы. Мы планируем дальнейшие исследования, чтобы улучшить гибкость и точность нашей модели, а также расширить ее применение в различных областях.
Abstract
Material creation and reconstruction are crucial for appearance modeling but
traditionally require significant time and expertise from artists. While recent
methods leverage visual foundation models to synthesize PBR materials from
user-provided inputs, they often fall short in quality, flexibility, and user
control. We propose a novel two-stage generate-and-estimate framework for PBR
material generation. In the generation stage, a fine-tuned diffusion model
synthesizes shaded, tileable texture images aligned with user input. In the
estimation stage, we introduce a chained decomposition scheme that sequentially
predicts SVBRDF channels by passing previously extracted representation as
input into a single-step image-conditional diffusion model. Our method is
efficient, high quality, and enables flexible user control. We evaluate our
approach against existing material generation and estimation methods,
demonstrating superior performance. Our material estimation method shows strong
robustness on both generated textures and in-the-wild photographs. Furthermore,
we highlight the flexibility of our framework across diverse applications,
including text-to-material, image-to-material, structure-guided generation, and
material editing.
Ссылки и действия
Дополнительные ресурсы: