L’utilisation de la réflexion permet de voir le monde sous de nouvelles perspectives.

Des évaluations précises
Les auteurs ont évalué leur technique en la comparant à d’autres techniques de modélisation des reflets, ce qui était légèrement différent de la tâche effectuée par l’ORCa. Ils ont bien réussi à séparer la couleur réelle de l’objet des reflets et ont surpassé les lignes de base en extrayant une géométrie et des textures plus précises.

Les chercheurs ont comparé les estimations de profondeur du système à des données réelles simulées sur la distance réelle entre les objets de la scène et ont constaté que les prédictions d’ORCa étaient fiables.

« Non seulement ORCa estime avec précision l’environnement en tant qu’image 5D, mais dans les étapes intermédiaires, il est également capable d’estimer la forme des objets et de séparer les reflets de la texture des objets », explique Dave.

Sur la base de ce test, les chercheurs souhaitent appliquer cette méthode aux images de drones. ORCa peut utiliser les faibles reflets des objets survolés par le drone pour recréer une scène depuis le sol. Ils souhaitent également améliorer ORCa afin qu’il puisse utiliser d’autres indices, tels que les ombres, pour obtenir des informations cachées ou combiner les reflets de deux objets pour capturer des images de nouvelles parties de la scène.

« L’évaluation de l’éblouissement spéculaire est très importante pour voir les coins, et c’est une étape naturelle pour voir les coins en utilisant l’éblouissement faible dans la scène », explique M. Raskar.

« Habituellement, les systèmes de vision ont du mal à traiter les objets brillants. C’est très créatif car cela transforme une ancienne faiblesse dans la luminosité d’un objet en un avantage. En tirant parti de la réflexion de l’environnement sur un objet brillant, l’auteur peut non seulement voir les parties cachées de la scène, mais aussi comprendre comment elle est éclairée », explique Achuta Kadambi, ingénieur et professeur adjoint à l’université de Californie à Los Angeles, qui n’a pas participé à l’étude. Californie, Los Angeles, qui n’ont pas participé aux travaux.

M. Kadambi ajoute que le développement de cette technologie « permet des applications 3D qui incluent, entre autres, la capacité de disposer des objets virtuels dans des scènes du monde réel de manière à ce qu’ils apparaissent lisses même dans des conditions d’éclairage difficiles ».

« L’une des raisons pour lesquelles d’autres n’ont pas été en mesure d’utiliser des objets brillants de cette manière est que la plupart des travaux antérieurs nécessitaient des surfaces dont la géométrie ou la texture était connue. Les auteurs ont dérivé une nouvelle formule intrigante qui ne nécessite pas de telles connaissances », conclut l’ingénieur.