A Binocular LVA Device based on Mixed Reality to Enhance Face Recognition - Archive ouverte HAL Access content directly
Reports (Research Report) Year : 2018

A Binocular LVA Device based on Mixed Reality to Enhance Face Recognition

Un dispositif binoculaire LVA basé sur la réalité mixte pour améliorer la reconnaissance des visages

(1) , (2) , (1)
1
2

Abstract

Today’s visual enhancement systems for low vision people consist of dedicated augmented reality hardware allowing to magnify or enhance the overall scene, independently of the image content or patient needs. For example, for patients with central vision loss, interacting with other has become a painful activity since faces and expressions can hardly be recognized. We introduce a new augmented reality system allowing to selectively enhances faces, using two image processing techniques. Our system has the capacity to adjust the enhancement to the detected faces’ size and distance, hence maintaining a constant boost in the critical range of spatial frequency. It offers a binocular and large Field-of-View and performs at near real-time with a modest laptop computer using multithreading. Preliminary experiments with three patients with central vision loss suggest that the enhancements chosen strongly depends on each patient’s condition and lead to improved recognition abilities when patients find their optimal settings.
Les systèmes d’amélioration visuelle actuels pour les malvoyants consistent en un matériel dédié à la réalité augmentée permettant d’agrandir ou d’améliorer la scène dans son ensemble, indépendamment du contenu de l’image ou des besoins du patient. Par exemple, pour les patients présentant une perte de vision centrale, l’interaction avec d’autres patients est devenue une activité douloureuse, car les visages et les expressions sont difficilement reconnaissables. Nous introduisons un nouveau système de réalité augmentée permettant d’améliorer de manière sélective les visages, en utilisant deux techniques de traitement d’images. Notre système a la capacité d’ajuster l’amélioration à la taille et à la distance des visages détectés, maintenant ainsi une augmentation constante de la plage critique de fréquences spatiales. Il offre un grand champ de vision binoculaire et fonctionne proche du temps réel avec un ordinateur portable modeste utilisant la technologie multithreading. Des expériences préliminaires menées auprès de trois patients présentant une perte de vision centrale suggèrent que les améliorations choisies dépendent fortement de l’état de chaque patient et permettent d’améliorer les capacités de reconnaissance lorsque les patients trouvent leurs paramètres optimaux.
Fichier principal
Vignette du fichier
RR-9216.pdf (3.37 Mo) Télécharger le fichier
Origin : Files produced by the author(s)
Loading...

Dates and versions

hal-01900574 , version 1 (22-10-2018)

Identifiers

  • HAL Id : hal-01900574 , version 1

Cite

Josselin Gautier, Nicolas Chleq, Pierre Kornprobst. A Binocular LVA Device based on Mixed Reality to Enhance Face Recognition. [Research Report] RR-9216, Université Côte d’Azur, Inria, France. 2018, pp.1-19. ⟨hal-01900574⟩
141 View
135 Download

Share

Gmail Facebook Twitter LinkedIn More