Esistono molti modi per manipolare le foto per farti sembrare migliore, rimuovere gli occhi rossi o il riflesso della lente, e così via. Ma finora il batter d’occhio si è dimostrato un tenace avversario di buone istantanee. Oggi però potrebbe cambiare tutto con la nuova ricerca di Facebook: grazie all’Intelligenza Artificiale Facebook riesce a sostituire gli occhi chiusi con quelli aperti in modo notevolmente convincente. Si tratta di una tecnica lontana da tutto quello finora visto in ambito “in-painting”, incluse le note funzionalità dei programmi Adobe di “riempimento sensibile al contesto” che consente agli utenti di sostituire senza problemi funzionalità indesiderate, ad esempio un ramo sporgente o un cloud, con una buona ipotesi su cosa ci sarebbe se non fosse.
Facebook e i sistemi di apprendimento automatico
Ma alcune funzionalità vanno oltre la capacità degli strumenti di sostituire, una delle quali è l’occhio. La loro natura dettagliata e altamente variabile rende particolarmente difficile la modifica o la creazione di un sistema che si realistico. Facebook, che probabilmente ha più immagini di persone che sbattono le palpebre di qualsiasi altra entità nella storia, ha deciso di prendere una brutta piega a questo problema. Facebook utilizza un Generative Adversarial Network (GAN), essenzialmente un sistema di apprendimento automatico che cerca di ingannare sé stesso pensando che le sue creazioni siano reali. In una GAN, una parte del sistema impara a riconoscere, per esempio, i volti, e un’altra parte del sistema crea ripetutamente immagini che, in base al feedback della parte di riconoscimento, crescono gradualmente in realismo. Tornando al caso degli occhi, il sistema è addestrato a riconoscere e replicare gli occhi aperti in modo convincente. Questo poteva essere già fatto, ma come è possibile vedere nella foto qui sotto i metodi esistenti lasciavano molto a desiderare. Sembravano incollare gli occhi delle persone senza molta considerazione per la coerenza con il resto dell’immagine.
Un sistema straordinariamente efficace
Le macchine sono ingenue in questo modo: non hanno la comprensione intuitiva che aprire gli occhi non cambia anche il colore della pelle che li circonda. Del resto, non hanno alcuna comprensione intuitiva di occhi, colori o altro. Quello che i ricercatori di Facebook hanno fatto è stato includere dati “esemplari” che mostrassero la persona target con gli occhi aperti, da cui il GAN impara non solo quali occhi dovrebbero andare sulla persona, ma come gli occhi di questa particolare persona sono modellati, colorati e così via. I risultati sono piuttosto realistici: non ci sono disallineamenti di colore o cuciture evidenti perché la parte di riconoscimento del sistema sa che non è così che la persona guarda. Durante i test, la gente ha scambiato gli occhi falsi, ha aperto le foto come se fossero immagini reali o ha detto che non potevano essere sicuri di quale fosse, per più della metà delle volte. E a meno che non sapessi che una foto è stata sicuramente manomessa, probabilmente non mi sarei accorto nemmeno se l’avessi incontrata nel mio newsfeed. Gandhi sembra un po ‘strano, però. In alcune situazioni il nuovo sistema di manipolazione delle immagini di Facebook continua a fallire creando artefatti strani se l’occhio di una persona è parzialmente coperto da una ciocca di capelli o, a volte, non riesce a ricreare correttamente il colore. Ma quelli sono problemi risolvibili. Potete immaginare l’utilità di un’applicazione automatica per l’apertura degli occhi su Facebook che controlla le altre foto di una persona e le usa come riferimento per sostituire un battito di ciglia nell’ultima. E’ un po’ inquietante, ma questo è abbastanza standard per Facebook, e almeno potrebbe salvare una foto di gruppo o due.
Leggi anche —> Facebook cancella 30 milioni di post