Virtual Fitting Room: Generating Arbitrarily Long Videos of Virtual Try-On from a Single Image -- Technical Preview

#### Контекст Область виртуальных примерок одежды (virtual try-on) увлекательна и новаторна, особенно с учетом возрастающего интереса к интерактивному онлайн-шопингу. Существующие методы часто ограничены в длине генерируемых видео, что не позволяет охватить разнообразие движений пользователя или длительные сценарии. Это связано с техническими вызовами, связанными с ресурсоемкостью генерирования и необходимостью обрабатывать большие объемы данных. Мотивация для этого исследования заключается в развитии модели, которая сможет генерировать длинные видео с высокой степенью реализму и постоянства, оптимизируя ресурсы и увеличивая гибкость. #### Метод Методология Virtual Fitting Room (VFR) основывается на подходе, основанном на авторегрессии и разбиении задачи на сегменты. Основная идея заключается в том, чтобы генерировать видео по-очереди, начиная с префикса, который обеспечивает локальную сглаженность, и использовать анкор-видео (360-градусный тур вокруг человека) для поддержки глобального временного синхронизации. Архитектура VFR включает в себя модели генерирования, редактирования и совмещения видео, чтобы обеспечить гладкость и консистентность. Этот подход исключает необходимость тяжеловесных вычислительных операций и длительного ролика, позволяя генерировать видео длиной до нескольких минут. #### Результаты В ходе экспериментов VFR было протестировано на различных данных, включая разнообразные полноелобные видео. Модель показала высокую точность в генерировании видео, где каждый кадр был сглажен с предыдущими и дальнейшими, при этом сохранялась всюдуто глобальная консистентность. Особенно значимы результаты в сценариях, где пользователь делает многообразные движения, так как VFR адаптируется к этим изменениям, сохраняя качество кадра и временной последовательности. #### Значимость Потенциал VFR распространяется на множество областей, включая онлайн-трейдинг, интерактивные технологии, а также развитие реального видео-создания. Одним из основных преимуществ является уменьшение ресурсоемкости при генерировании видео, что делает VFR более доступным для различных приложений. Благодаря своей уникальности, модель может стать инструментом для повышения пользовательского опыта в интернет-магазинах, а также для развития научных исследований в области видео-генерации. #### Выводы Выводы экспериментов подтверждают эффективность VFR в генерировании длительных видео с высокой степенью реалистичности и сглаженности. Будущие исследования будут сконцентрированы на улучшении качества генерирования, внед