APPLE: Etichettatura Pseudo-Che Preserva gli Attributi per il Face Swapping Basato su Diffusione

APPLE: Una Svolta nella Tecnologia di Scambio di Volti Basata sulla Diffusione

I ricercatori hanno svelato un nuovo framework per lo scambio di volti chiamato APPLE (Attribute-Preserving Pseudo-Labeling), progettato per migliorare sia il trasferimento dell'identità che la preservazione degli attributi nella manipolazione digitale dei volti. Questo nuovo approccio affronta sfide di lunga data, in particolare la mancanza di verità di base reale nello scambio di volti, che storicamente ha ostacolato la qualità dei risultati.

Innovazioni Chiave di APPLE

APPLE introduce un framework insegnante-studente che sfrutta la supervisione pseudo-etichettata consapevole degli attributi per migliorare la fedeltà degli attributi. Il framework riformula il processo di scambio di volti come un compito di de-blurring condizionale, consentendo una preservazione più accurata di attributi come l'illuminazione e il tono della pelle.

• Framework Insegnante-Studente: Utilizza un approccio di apprendimento duale per produrre triplette pseudo di alta qualità, fornendo al modello studente supervisione diretta per lo scambio di volti.
• Deblurring Condizionale: Riformula il compito per meglio mantenere gli attributi specifici del target durante il processo di trasferimento dell'identità.

Questi progressi consentono ad APPLE di raggiungere prestazioni all'avanguardia sia nel trasferimento dell'identità che nella preservazione degli attributi, risultando in output più fotorealistici. La capacità del framework di produrre etichette pseudo di alta qualità influisce direttamente sulla qualità delle immagini scambiate, rappresentando un contributo significativo nel campo.