Dans ce projet, l’équipe a choisi d’utiliser une version modifiée de Hololens pour capter l’environnement puis, en passant par un traitement à base d’IA, pouvoir le retranscrire de manière sonore.
Le prototype créé par les chercheurs du projet Tokyo consiste en un appareil d’imagerie très sophistiqué qui est capable d’identifier des objets et des personnes. Cette technologie, qui se porte sur la tête à la façon d’un bandeau, se base sur le casque de réalité augmentée HoloLens (dont la lentille a été retirée) et sur l’intelligence artificielle. Grâce à ses caméras intégrées et à l’IA, l’appareil est en mesure de détecter les personnes qui se trouvent dans une pièce (et de les identifier)
Source: Microsoft aide les malvoyants à mieux appréhender le monde qui les entoure grâce à l’HoloLens