Inpainting
L'inpainting est le nom donné à la technique de reconstruction d'images détériorées ou de remplissage des parties manquantes d'une image[1].
Elle peut être pratiquée de manière manuelle, avec des techniques similaires à celles de la restauration d'anciens tableaux ou de photographies (retouche ou réintégration colorée), ou bien avec un ordinateur, avec ou sans interaction de l'utilisateur.
Applications
Les applications sont multiples : retrait d'occlusions[2], retouche d'image, trucage photographique, photomontage, effets spéciaux, réalisation de panoramas, vidéo, vision par ordinateur…
Ici retrait de la statue (le trou correspond à la zone grise de l'image de gauche) avec la fonction de remplissage du logiciel Adobe Photoshop. |
Notions
- Le « trou » correspond à la zone à compléter.
- Un patch est un carré de X×X pixels.
- Un offset correspond au vecteur (distance) entre deux patch identiques.
Méthodes
Il existe deux grandes catégories de méthodes d'inpainting numérique[1] :
- les « diffusion-based » qui utilisent des équations aux dérivées partielles (EDP)[2] ;
- les « exemplar-based » qui résolvent des problèmes de graphes[3] ou de correspondance de patchs[4].
Diffusion-based
Cette méthode qui utilise des EDP, est particulièrement adaptée pour remplir de petites zones ou retirer des inclusions minimes (comme du tatouage numérique), tout en préservant la qualité du résultat et la rapidité[5]. Le but étant de passer des techniques manuelles d'inpainting à une formule mathématique générale :
Avec :
- : l'image en entrée
- : les coordonnées des pixels.
- : le taux de remplissage.
- : l'actualisation de l'image.
- : la zone à compléter (c'est-à -dire le trou).
Méthode patch-match
Notes et références
Annexes
Voir aussi
Bibliographie
: document utilisé comme source pour la rédaction de cet article.
- (en) Kaiming He et Jian Sun, « Statistical Image Completion », Springer,‎ , p. 16-29 (lire en ligne, consulté le )
- (en) Marcelo Bertalmio, Guillermo Sapiro, Vincent Caselles et Coloma Ballester, « Image Inpainting », Proceedings of the 27th annual conference on Computer graphics and interactive techniques, ACM Press/Addison-Wesley Publishing Co,‎ , p. 417-424 (lire en ligne, consulté le )
- (en) Connelly Barnes, Eli Shechtman, Adam Finkelstein et Dan Goldman, « PatchMatch: A Randomized Correspondence Algorithm for Structural Image Editing », ACM Transactions on Graphics-TOG,‎ (lire en ligne, consulté le )
- (en) Vivek Kwatra, Arno Schödl, Irfan Essa, Greg Turk et Aaron Bobick, « Graphcut textures: image and video synthesis using graph cuts », ACM Transactions on Graphics-TOG, vol. 22,‎ , p. 277-286 (lire en ligne [archive du ], consulté le )
- (en) Manuel Oliveira, Brian Bowen, Richard McKenna et Yu-Sung Chang, « Fast Digital Image Inpainting », Appeared in the Proceedings of the International Conference on Visualization, Imaging and Image Processing (VIIP 2001),‎ (lire en ligne, consulté le )
Liens externes
- (en) M. Granados, K. I. Kim, J. Tompkin, J. Kautz, C. Theobalt, « Background Inpainting for Videos with Dynamic Objects and a Free-moving Camera » [archive du ], Institut Max-Planck d'informatique (consulté le )