Joint inpainting of depth and reflectance with visibility estimation
BEVILACQUA, Marco
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
Laboratoire de l'intégration, du matériau au système [IMS]
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
Laboratoire de l'intégration, du matériau au système [IMS]
BIASUTTI, Pierre
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
See more >
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
BEVILACQUA, Marco
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
Laboratoire de l'intégration, du matériau au système [IMS]
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
Laboratoire de l'intégration, du matériau au système [IMS]
BIASUTTI, Pierre
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
< Reduce
Institut de Mathématiques de Bordeaux [IMB]
Méthodes d'Analyses pour le Traitement d'Images et la Stéréorestitution [MATIS]
Laboratoire Bordelais de Recherche en Informatique [LaBRI]
Language
en
Article de revue
This item was published in
ISPRS Journal of Photogrammetry and Remote Sensing. 2017-03, vol. 125, p. 16--32
Elsevier
English Abstract
This paper presents a novel strategy to generate, from 3-D lidar measures, dense depth and reflectance images coherent with given color images. It also estimates for each pixel of the input images a visibility attribute. ...Read more >
This paper presents a novel strategy to generate, from 3-D lidar measures, dense depth and reflectance images coherent with given color images. It also estimates for each pixel of the input images a visibility attribute. 3-D lidar measures carry multiple information, e.g. relative distances to the sensor (from which we can compute depths) and reflectances. When projecting a lidar point cloud onto a reference image plane, we generally obtain sparse images, due to undersampling. Moreover, lidar and image sensor positions typically differ during acquisition; therefore points belonging to objects that are hidden from the image view point might appear in the lidar images. The proposed algorithm estimates the complete depth and reflectance images, while concurrently excluding those hidden points. It consists in solving a joint (depth and reflectance) variational image inpainting problem, with an extra variable to concurrently estimate handling the selection of visible points. As regularizers, two coupled total variation terms are included to match, two by two, the depth, reflectance, and color image gradients. We compare our algorithm with other image-guided depth upsampling methods, and show that, when dealing with real data, it produces better inpainted images, by solving the visibility issue.Read less <
English Keywords
Inpainting
Total Variation
Depth Maps
Lidar
Reflectance
Point Cloud
Visibility
Origin
Hal imported