APPLE: Сохранение атрибутов при псевдозначении для диффузионного замещения лиц

Изображение создано Gemini AI
Исследователи разработали метод APPLE (Attribute-Preserving Pseudo-Labeling) для замены лиц, который улучшает передачу идентичности, сохраняя при этом ключевые атрибуты, такие как освещение и макияж. Подходя к замене лиц как к задаче условного размытия и применяя модель «учитель-ученик» для более эффективного контроля, APPLE демонстрирует фотореалистичные результаты и устанавливает новые стандарты в области сохранения атрибутов.
APPLE: Прорыв в технологии замены лиц на основе диффузии
Исследователи представили новую структуру замены лиц под названием APPLE (Сохранение Атрибутов Псевдо-Разметки), разработанную для улучшения как передачи идентичности, так и сохранения атрибутов в цифровой манипуляции с лицами. Этот новый подход решает давние проблемы, особенно отсутствие реальной основы для проверки в процессе замены лиц, что исторически затрудняло качество результатов.
Ключевые инновации APPLE
APPLE вводит структуру «учитель-ученик», которая использует псевдо-разметку с учетом атрибутов для повышения точности сохранения атрибутов. Эта структура реформулирует процесс замены лиц как задачу условного размывания, что позволяет более точно сохранять такие атрибуты, как освещение и тон кожи.
- Структура «учитель-ученик»: Использует двойной подход к обучению для создания высококачественных псевдо-триплетов, обеспечивая модели ученика прямым контролем в процессе замены лиц.
- Условное размывание: Реформулирует задачу для лучшего сохранения специфических для цели атрибутов во время процесса передачи идентичности.
Эти достижения позволяют APPLE достигать передовых результатов как в передаче идентичности, так и в сохранении атрибутов, что приводит к более фотореалистичным изображениям. Способность структуры производить высококачественные псевдо-разметки непосредственно влияет на качество изображений с заменой лиц, делая это значительным вкладом в область.
Связанные темы:
📰 Первоисточник: https://arxiv.org/abs/2601.15288v1
Все права и авторство принадлежат первоначальному издателю.