FakeParts: a New Family of AI-Generated DeepFakes
2508.21052v1
cs.CV, cs.AI, cs.MM
2025-08-30
Авторы:
Gaetan Brison, Soobash Daiboo, Samy Aimeur, Awais Hussain Sani, Xi Wang, Gianni Franchi, Vicky Kalogeiton
Резюме на русском
## Контекст
Область исследования включает развитие глубоких искусственных нейронных сетей (ДИНС) для создания и обнаружения глубоких подделок (deepfakes) — технологий, позволяющих генерировать реалистичные изображения и видео. Одной из основных проблем является развитие методов, способных обнаруживать поддельные видео, порожденные алгоритмами глубокого обучения. Актуальность работы связана с ростом числа лживых видео, используемых в массовых средствах массовой информации, социальных сетях и даже юридических процессах. Недостаток эффективных алгоритмов обнаружения детонаций в видео ставит под угрозу безопасность и доверие к искусственным технологиям.
## Метод
Работа предлагает FakeParts, новую классификацию детонаций в видео, характеризующуюся скрытыми, локализованными изменениями в определенных областях изображения или временных интервалах. Методология включает в себя создание FakePartsBench — большого датасета, содержащего порядка 25 тысяч видео, полностью аннотированных на уровне пикселей и кадров. Данные использовались для тренировки и оценки модели, включая тестирование современных методов обнаружения deepfakes. Архитектура основывается на нейронных сетях трансформеров (Transformer-based models), которые анализируют поток видео в трехмерной плоскости.
## Результаты
Эксперименты показали, что FakeParts обнаруживаются менее эффективно стандартными методами обнаружения deepfakes. Обнаружена снижение точности человеческого распознавания в 30%, а также понижение эффективности автоматических моделей. Датасет FakePartsBench позволил выявить слабые места текущих моделей и подтвердить необходимость развития методов, ориентированных на обнаружение локализованных детонаций.
## Значимость
FakeParts и FakePartsBench могут применяться в различных технологических сферах, таких как безопасность информации, медиа-анализ и проверка достоверности видео. Они обеспечивают новые возможности для развития более устойчивых алгоритмов обнаружения deepfakes. Благодаря новому классу детонаций, работа направляет исследователей на создание методов, способных более эффективно различать глубокие подделки и исключить поддельные сигналы.
## Выводы
Работа представляет новую классификацию глубоких подделок — FakeParts, и определяет FakePartsBench как идеальный инструмент для их исследования. Основные достижения включают в себя создание первого большого датасета для проверки методов обнаружения локализованных детонаций и выявление уязвимостей текущих моделей. Будущие исследования будут сфокусированы на развитии более развитых алгоритмов, которые смогут эффективно рас
Abstract
We introduce FakeParts, a new class of deepfakes characterized by subtle,
localized manipulations to specific spatial regions or temporal segments of
otherwise authentic videos. Unlike fully synthetic content, these partial
manipulations, ranging from altered facial expressions to object substitutions
and background modifications, blend seamlessly with real elements, making them
particularly deceptive and difficult to detect. To address the critical gap in
detection capabilities, we present FakePartsBench, the first large-scale
benchmark dataset specifically designed to capture the full spectrum of partial
deepfakes. Comprising over 25K videos with pixel-level and frame-level
manipulation annotations, our dataset enables comprehensive evaluation of
detection methods. Our user studies demonstrate that FakeParts reduces human
detection accuracy by over 30% compared to traditional deepfakes, with similar
performance degradation observed in state-of-the-art detection models. This
work identifies an urgent vulnerability in current deepfake detection
approaches and provides the necessary resources to develop more robust methods
for partial video manipulations.
Ссылки и действия
Дополнительные ресурсы: