Autoguided Online Data Curation for Diffusion Model Training

----------------------------------------------------------------------------------------------------------------------- ## Контекст ----------------------------------------------------------------------------------------------------------------------- Область исследования связана с повышением эффективности обучения генерирующих моделей с помощью автоматического выбора данных. Исследователи сталкиваются с проблемой высоких затрат на вычисления при обучении различных генерирующих моделей, таких как diffusion models. Эти модели требуют больших объемов качественных данных для эффективного обучения, что ставит перед исследователями задачу оптимизации процесса выбора данных. Многие методы поиска и выбора эффективных примеров включают ручную интервенцию или требуют постоянного мониторинга, что требует значительных ресурсов. В этой работе авторы рассматривают новые подходы, которые могут автоматизировать этот процесс и улучшить эффективность обучения. ## Метод ----------------------------------------------------------------------------------------------------------------------- Работа основывается на интеграции двух подходов: **Joint Example Selection (JEST)** и **autoguidance**. JEST представляет собой метод оптимизации выбора примеров в каждой эпохе обучения. Он использует априорные сведения об эффективности примеров и адаптируется к изменениям в данных. Autoguidance, в свою очередь, метод подбора примеров, основанный на оценке качества каждого примера во время обучения. Авторы создали унифицированную среду для эффективного проведения экспериментов. Она позволяет легко адаптировать и сравнивать различные стратегии выбора примеров. Эксперименты проводятся на синтетических и реальных данных, чтобы оценить качество и эффективность разных подходов в условиях различных задач. ## Результаты ----------------------------------------------------------------------------------------------------------------------- Исследование проводилось на двух задачах: генерации 2D-синтетических данных и (3x64x64)-D изображений. Результаты показали, что автоматическое выбор примеров (autoguidance) постоянно улучшает качество и разнообразие сгенерированных данных. Метод JEST в свою очередь показал высокую эффективность в начале обучения, но требует большего времени и усилий для реализации. В сравнении с автоматическим выбором, JEST дает незначительные преимущества в данных задачах, однако необходимость в дополнительных вычислительных мощностях и сложности приводят к тому, что лучший выбор для большинства задач остается автоматическим выбором примеров. ## Значимость ----------------------------------------------------------------------------------------------------------------------- Результаты этого исследования имеют практическое значение для области генерирующих моделей и данных. Автогуидинг позволяет эффективно использовать ресурсы, сокращая время и стоимость обучения моделей. Это важно для приложений, где ресурсы вычислений ограничены. Методы, рассмотренные в работе, также могут быть применены в областях, где требуется оптимизация выбора данных, таких как медицина, компьютерного зрения и естественного языка. ## Выводы ----------------------------------------------------------------------------------------------------------------------- Исследование показало, что автоматич