Facebook peut littéralement ouvrir les yeux grâce à l'IA Pour corriger les photos aux yeux fermés

Les programmes précédents utilisaient l’image des yeux de quelqu’un d’autre pour corriger un clignement (troisième colonne), mais les chercheurs de Facebook viennent de créer un programme qui utilise vos propres yeux (quatrième colonne).Recherche Facebook

L'intelligence artificielle est désormais suffisamment intelligente pour peindre les régions manquantes d'un visage afin de corriger un clignement des yeux ou de transformer un froncement de sourcils en sourire. Le problème? Ces I.A. les programmes utilisent la photo d’un étranger, donc même si les programmes peuvent corriger un mauvais clignement, ils créent également un Frankenstein de vous avec les yeux de quelqu’un d’autre. Les chercheurs de Facebook ont ​​peut-être trouvé une solution en formant une IA. qui utilise vos yeux réels d'une photo précédente pour corriger ce clignement. Facebook a publié la recherche le 18 juin.

Réparer une photo avec l'IA n'a rien de nouveau - plus tôt cette année, Les chercheurs de Nvidia ont créé un système d'IA. outil de guérison

qui pourrait remplacer les pixels manquants dans un portrait, y compris les yeux manquants. Bien que ces programmes puissent réparer quelque chose comme un clignement, l'IA. s'est appuyé sur une base de données d'images d'autres personnes, peignant dans les yeux de quelqu'un d'autre pour corriger ce clignement. En plus d’utiliser les yeux de quelqu’un d’autre, la technologie avait également tendance à privilégier certaines formes et couleurs, Facebook suggère.

Vidéos recommandées

Mais Facebook a probablement déjà une trace de votre visage (ou quelques centaines de selfies), donc l'entreprise Les chercheurs ont décidé d'essayer de corriger ce clignement gênant sans donner l'impression que vous avez une nouvelle paire de lunettes. yeux. Les chercheurs ont créé deux approches différentes de la technique, appelées eye in painting. Le premier utilise une image de référence pour remplacer les yeux. Le second stocke une version réelle de vos yeux, de la même manière que Facebook stocke des données pour la reconnaissance faciale, à utiliser dans ces correctifs.

Alors que de nombreuses I.A. Les programmes fonctionnent avec des bases de données de photos existantes pour former le programme, Facebook a créé son propre ensemble de données. La série de photos de célébrités prises sur un podium par des photographes professionnels ne correspondait pas au décor mal éclairé. selfies que le programme est plus susceptible de rencontrer, tandis que d'autres ensembles de données contenaient des images avec des personnes portant des lunettes de soleil. Plutôt, Facebook a créé un ensemble de données d'environ 200 000 personnes, avec au moins trois images de chaque personne.

Le programme base les résultats sur l'œil de référence afin d'aider à préserver l'identité, tandis que l'IA. aide à créer un résultat plus réaliste. Par exemple, le réseau a utilisé les données des photos pour apprendre à créer un résultat réaliste lorsque la pose ou l'éclairage des yeux de référence et les photos retouchées sont différents.

Le programme qui en résulte, selon Facebook, corrige les clignements des yeux avec des résultats qui ressemblent plus précisément à cette personne spécifique et sans perdre autant de données que les programmes précédents. Les résultats ne sont pas parfaits – pour les personnes dont les cheveux masquent une partie d’un œil, par exemple, le programme n'a pas recréé avec précision la forme de l'œil, alors que dans d'autres scénarios, la couleur des yeux avait une légère variantes.

Facebook n'a pas fini de rechercher la possibilité de réparer automatiquement ces selfies clignotants, mais avec certains travail supplémentaire, une future version du réseau social pourrait faire bien plus avec des corrections automatiques de photos avant partage.

Recommandations des rédacteurs

  • La dernière A.I. de Nvidia les résultats prouvent qu'ARM est prêt pour le centre de données
  • L’IA peut-elle battre les ingénieurs humains dans la conception de micropuces? Google le pense
  • Comment l'USPS utilise les GPU Nvidia et l'IA pour suivre le courrier manquant
  • L'IA BigSleep c'est comme Google Image Search pour des images qui n'existent pas encore
  • Une nouvelle IA intelligente le système promet de dresser votre chien pendant que vous êtes loin de chez vous

Améliorez votre style de vieDigital Trends aide les lecteurs à garder un œil sur le monde en évolution rapide de la technologie avec toutes les dernières nouvelles, des critiques de produits amusantes, des éditoriaux perspicaces et des aperçus uniques.