Nettoyer le bruit d'une image par l'apprentissage en profondeur (Deep learning)

Research at NVIDIA: AI Can Now Fix Your Grainy Photos by Only Looking at Grainy Photos

M'ouais c'est juste un filtre instagram qui bouffe de la ram à exécuter

Pas mal !

Pour restaurer des vieux film c'est prometteur

Le Koala m'a bluffé
J'ai envie de me transhumaniser

aller bye bye les stock images watermark

Adobe ont intérêt à se mettre un coup de fouet
Par contre je ne comprend pas, ils l'utilisent de quelle façon ? Ils ont/vont créer un logiciel ou c'est juste la démonstration d'une technologie qui justement pourra être revendu à adobe etc ?

C'est difficile à croire...

@chopsuey Il y a peu de chances: C'est "relativement" facile a coder ce genre de choses.
Techniquement, c'est pas forcement une grosse claque d'ingenierie, il faut plutot voir ca comme un coup de com pour bien rappeler a tout le monde que le machine learning ca se parallelise tres bien sur les GPU, notamment ceux estampilles Nvidia.
Et que donc la ou il aurait fallu un temps d'apprentissage tres long autrefois, on peut maintenant le faire tres vite sur des grosses masses de donnees grace a une ou plusieurs cartes nvidia

cote demo technique, c'est interessant dans le sens ou ca montre qu'un truc auparavent tres relou a coder avec une chiee de transformations mathematiques, un reseau de neurones a convolution peut apprendre a le faire lui meme avec des resultats souvent meilleurs

attention quand meme a ne pas tomber dans la mode: Maintenant si on ecoute les mecs, tous les problemes du monde peuvent etre resolus en machine learning. Je pense que c'est tres con de vouloir en foutre partout. les algos a l'ancienne seront toujours meilleurs sur certains problemes. Mais faut reconnaitre qu'en traitement de signal, c'est plutot efficace

Je connais le truc!
Ils ont juste mis la vidéo à l'envers !

Ba merde! Si ça avait pu exister du temps des cassettes vhs! A force de me mater les films de cul en boucle ça aurait pu enlever les traits rouges a l'écran!

@nobrain Ce que je constate en tout cas c'est que sur photoshop il n'existe rien de semblable, donc si c'est si facile à coder pourquoi ce n'est pas intégré dans le logiciel leader mondial en terme de manipulation photo ?

Citation :

Il y a bien des filtres pour atténuer du bruit ou une photo flou ou flou directionnel...C'est a faire manuellement, c'est pas évident...Après pour sur que ça ne rendra pas le résultat de la vidéo!

Edit: @Infame_ZOD et des rayures sur le casque!

Citation :

Plutôt les traits rouge sur la main ^^

@Croc63 Oui je connais ces techniques et clairement oui il n'y a rien de comparable avec ce que l'on voit dans la vidéo. Même chose pour effacer le texte, il y a bien sûr des algorithmes de reconstruction des pixels à partir du contenu comme avec l'outil correcteur ou le remplissage par contenu pris en compte... mais le résultat n'est vraiment pas terrible en comparaison de ce que l'on semble pouvoir obtenir dans cette vidéo.

Donc je me demande pourquoi cette technologie n'est pas présente sur PS si ce n'est pas un prouesse technologique ?

@chopsuey peut être parce qu'ils n'ont pas les droits sur tout. Ou que ça vient juste de sortir et que ça va être proposé dans les prochaines versions?!

@Croc63 Oui ce que tu dis c'est aussi ce que je pense mais Je disais ça par rapport à @nobrain qui dit en résumé que c'est asse simple à programmer, qu'il n'y a rien de fou et que c'est pour faire la promo abusive du machine learning face à la méthode algorithmique classique.
Hors si ce qui est montré dans la vidéo fonctionne aussi bien avec n'importe quelle photo, c'est juste du jamais vue et c'est hyper bluffant.
En gros il semble dire que c'est déjà réalisable avec les algos classiques mais que le machine learning permet juste de le programmer plus rapidement et de façon moins complexe. Donc j'essaye de comprendre où il existe déjà un programme capable de faire ce qui est montré dans la vidéo car clairement photoshop en est trèèès loin.

@chopsuey éliminer un bruit généré artificiellement c'est un des premiers exos qu'on fait en traitement d'images. L'image du koala est très impressionnante mais typique des résultats qu'on peut obtenir. Nous nous sommes incapables de distinguer l'image d'origine sous le bruit, mais toutes les infos nécessaires pour restituer une bonne approximation de l'image d'origine sont là.

@zafirbel Montre moi des exemples alors ou dis moi comment tu fais, parce que même avec le plugin "define 2" sur PS c'est irréalisable et je ne parle même pas du filtre de réduction du bruit de base qui est ridiculement performant.
Je te laisse la photo si tu veux me bluffer:


Et tu ne parles pas de la suppression du texte où là aussi c'est absolument irréalisable avec l'algo de reconstruction de base sur ps.
En y passant du temps et en utilisant plusieurs techniques on peut réussir à supprimer pas mal de choses suivant comment est constitué la photo, mais un exemple comme ça ben courage:




Même en réussissant à sélectionner toutes les zones à supprimer, l'algo de PS ferait n’importe quoi, ça ressemblerait à rien et il faudrait passer des heures à jongler entre l'outil tampon, pièce, correcteur... pour un résultat forcément moins bon que celui présenté dans la vidéo.

@chopsuey en effet, je parlais de la réduction de bruit, pas de l'enlèvement de textes.

Deux papiers universitaires (dont un date de 99) sur l'enlèvement de bruit impulsionnel, les exemples sont en N&B mais ça ne change pas vraiment le problème :
http://scholar.google.fr/scholar_url?url=http://ira.lib.polyu.edu.hk/bitstream/10397/221/1/CS_ADSP_V46_1_99.pdf&hl=fr&sa=X&scisig=AAGBfm1mACA0OGawJIZvTanh52Fw-kggxQ&nossl=1&oi=scholarr
http://scholar.google.fr/scholar_url?url=http://citeseerx.ist.psu.edu/viewdoc/download%3Fdoi%3D10.1.1.704.7031%26rep%3Drep1%26type%3Dpdf&hl=fr&sa=X&scisig=AAGBfm1SAcSwLlaJfTunALV5eyAsasoPLA&nossl=1&oi=scholarr

Edit : si tu pars des captures de la vidéo tu rajoutes un obstacle non-négligeable, la compression de la-dite vidéo.