Vidéo : Une intelligence artificielle développée par Nvidia capable de reconstruire des photos abimés

Ouais...M'enfin le papy il a quand même les mêmes yeux que la meuf...

 
Y a déjà des logiciels qui le font depuis des années... mais le résultat avec les visages est assez affolant.

On voit que le logiciel est gentil puisqu'il ne reconstruit pas les rides.

 
Y a déjà des logiciels qui le font depuis des années... mais le résultat avec les visages est assez affolant.

On voit que le logiciel est gentil puisqu'il ne reconstruit pas les rides.

plus rapide et efficace que photoshop!
impressionnant

Photoshop n'a qu'à bien se tenir !

A première vue, déconcertant de facilité et de réalisme !

Impressionnant !

Y'en a d'autres qui ont reconnu Dominic Santini ou je suis juste vieux ?

[Edit] @TomBomb MercI

Impressionnant.

C'est chez Adobe qu'ils doivent faire la tête.

Vous avez des infos sur la disponibilité d'une telle application ?

Au début j'allais aussi dire que Photoshop permet ça depuis des années, mais la reconstruction qu'on voit dans les derniers exemples est bluffant.

Le traitement d'image avec choix de points d'intérêt et sélection d'éléments particuliers se fait depuis très longtemps, même si c'est toujours impressionnant.
Par exemple le Seam Carving, qui permet d'agrandir une image ou de la rétrécir, en gardant ce qui est intéressant, existe depuis 13 ans. Si on prend une photo avec une personne dans l'eau et qu'on réduit la largeur de l'image, l'algorithme enlève de l'eau mais ne touche pas à la personne.

https://en.wikipedia.org/wiki/Seam_carving

Et pour ceux qui se font du souci pour Adobe, ne vous inquiétez pas, ce genre de fonctionnalité est présente dans leurs logiciels depuis longtemps !

Il n'empêche que c'est chouette ce qu'il font chez NVidia ! Le maquillage sur les yeux est un peu trop chargé à mon goût, mais c'est bien fait.

Au début c'est aussi performant que Content Aware Fill de Photoshop. La différence semble être qu'il est capable de comprendre le contexte de ce qu'il remplace. Par contre ça m'a pas l'air d'être logique de remplacer un oeil par un autre, du coup je suis pas super convaincu de leur choix de démo.

Impressionnant de facilité avec laquelle cela corrige tout.

Si tout le monde peut y avoir accès, tout le monde se prendra pour un graphiste.

C'est la vitesse d'exécution qui est sympa.
Et bientôt, la retouche des rides en temps réel à la télé ?

Il arrive que l’I.A soit ...joueuse

Moi j'ai conçu une IA qui remet les images comme elles étaient avant l'altération. C'est classe ou pas ?

Mouais...

Pour un affichage écran ça peut passer, mais je serais curieux de voir ce que ça donne pour du print (je gage pour une bouse digne d'une modif sur Paint).

@Padma De quoi inspirer un épisode de Black Mirror

Embellir la réalité tout un concept...

Ouais...M'enfin le papy il a quand même les mêmes yeux que la meuf...

il y avait aussi un logiciel qui permettait de modifier la corpulence des corps dans un film:
movie reshape
https://www.youtube.com/watch?v=zXSj4pcl9Ao

@TomBomb Super impressionnant!!!

@BobDylan
Ah ! C'était le bon temps des photos officielles; sans cesse retouchées en fonction des purges de Big Brother. Le peuple y croyait...
Maintenant avec la réalité virtuelle et les logiciels de retouche, où est la vérité ?

@-Ninja-

Le but de ce programme est simplement de reconstruire une chose qui a été effacée. Il ne remplace donc pas un oeil par un autre mais en reconstruit un sur la base de ce qu'il "connaît". Mis à part ça, c'est une des seules choses qui n'est pas vraiment au point là-dedans, les nouveaux yeux sont un peu bizarres.

@DevSk0re Je sais bien, je parle de la situation. Est-ce vraiment un problème régulier d'avoir une photo où tu dois remplacer ou créer des nouveaux yeux? Surtout si le résultat est un peu foiré. D'où le fait que je questionne si c'était le meilleur exemple qu'ils pouvaient choisir.

@Karalol Le logiciel reprends des truc déjà présent sur la photo.
Ici l'IA accède clairement a une bibliothèque d’image et choisis en fonction de sa compréhension de la photo.
Ça permettra d'aller beaucoup plus loin

Si quelqu'un peut me conseiller sur un logiciel de retouche photo ancienne et abimé se serait sympa car je connais pas trop !

Merci d'avance

Edit : Pour info le logiciel s'appelle Nvidia FastPhotoStyle et il permet de juxtaposer l'environnement de 2 photos !
C'est pour ça que sur les photos de visage on a pu voir les yeux d'une femme se collés sur le visage de l'acteur !

Je cherche à le télécharger là mais pas moyen de l'avoir d'aprés les 1ers liens que je consulte ...dés que je l'ai je vous le glisserai en partage

De quoi alimenter les sites de ré-information new age pendant très longtemps

Pas convaincu, les retouches se voient clairement (les zone retouchées sont très floues), d'ailleurs ils prennent bien soin de pas mettre les résultats finaux en full screen, ça serait trop flagrant.
Le jour où une IA fera mieux qu'un graphiste n'est pas encore arrivé. Le but d'une retouche photo est d'être réaliste donc même si t'arrives à la retoucher en 2 secondes grâce à une IA, si le résultat est à chier ta photo sera inutilisable.

Pour tous ceux qui ne comprennent pas ou qui disent que des logiciels le font depuis longtemps déjà.

Il s'agit d'inpainting, cela consiste à remplir un trou dans une image à partir des informations que l'on a autour. Oui, les logiciels comme photoshop font de l'inpainting, mais à ce que je sache pas de la même manière qu'ici.

Dans ce cas, ils utilisent du deep learning, donc un réseau de neurones (d'où le terme intelligence artificielle). Je n'ai pas regardé en détail leur travail mais pour faire simple j'imagine qu'ils ont entraîné leur réseau de neurones avec une banque d'images contenant énormément de photos de personnes, de décors, de situations en tout genre. Et ce réseau de neurones va donc se servir de ce qu'il a appris grâce à toutes ces images pour combler les trous.

Imaginez que l'on demande à une personne de dessiner quelque chose de cohérent pour remplacer des trous dans l'image. Cette personne va chercher à reconnaître ce qu'elle voit dans l'image, par exemple un visage sans yeux, et va puiser dans tout ce qu'elle a déjà vu, dans sa vie (pour l'IA lors de son entraînement donc), qui pourrait lui servir à dessiner ce qui conviendrait le mieux pour combler le trou.

Ce qui est nouveau ici c'est que l'on s'appuie sur une "expérience" basée sur une banque d'images réelles alors que la plupart des logiciels que l'on utilise jusqu'à maintenant se contentent d'utiliser seulement les informations contenues dans l'image elle même, des textures, des contours, etc ...

J'avais vu un article qui date de quelques années qui faisait la même chose mais ... ça prenait plusieurs minutes pour traiter une image. Si c'est vraiment en temps réel ici c'est surtout ça qui est impressionnant comparé à ce qui se faisait déjà dans la recherche dernièrement.

Je ne trouve pas ça impressionnant, Adobe le fait depuis longtemps dans Photoshop.
https://helpx.adobe.com/fr/photoshop-elements/using/content-aware-fill.html
En gros le contenu sélectionné est reconstruit avec ce qu'il y a autour.

Donc à part pour les yeux qui sont... très moyens et ressemblent plus à un cas particulier fait à l'arrache pour les besoins de la présentation : rien de neuf.

@2kin_ lis mon poste juste au dessus, ici ce n'est pas reconstruit seulement à partir de ce qu'il y a autour mais aussi à partir d'une banque d'images

Hahaha les mecs qui disent que ca existe depuis des annees n'ont rien compris a la puissance du truc !
Quand ils effacent les yeux de la fille, l'IA doit analyser l'image, comprendre qu'il s'agit d'un visage auquel ils manquent des yeux et mettre quelque chose pour combler les trous qui soit en correspondance avec l'image...
Je vous laisse reflechir a tout ca...
Comparer ca avec les logiciels d'avant c'est un peu comme comparer Deep Blue et AlphaZero, le resultat peut sembler le meme mais l'approche est totalement differente !

Wow, impressionnant.

@Cliquez-ICI
ici :
https://github.com/NVIDIA/FastPhotoStyle

et la doc là :
https://github.com/NVIDIA/FastPhotoStyle/blob/master/USAGE.md

Ça simplifie énormément le travail de retouche d'image.

ce passe quoi quand on efface toute l image ?

L'IA va révolutionner de nombreuses choses. Pour le meilleur et... pour le pire aussi, si on ne fait pas gaffe (mais peut-on seulement avoir le moindre contrôle dessus ?).

Imaginez une IA implémentée dans un robot de Boston Dynamics (allez voir sur Youtube pour ceux qui ne connaissent pas)... C'est fascinant et effrayant à la fois.

@33man

Citation :

ca devraitmontrer une bitte, non?

@Detraquey oui j'avais bien compris, simplement je ne trouve pas le résultat impressionnant, même pour les yeux qui est pour moi la véritable application d'une telle démarche.
https://arxiv.org/pdf/1804.07723.pdf