PRojet de suivi oculaire

L’intelligence Artificielle au service de la santé !

Projet de suivi oculaire

Exemple de réalisation

Projet permettant d’interagir grâce au suivi oculaire

Problématique

L’utilisation sans contact d’un écran (ordinateur, borne automatique) est un enjeu devenu important dans le contexte sanitaire actuel. C’est aussi un outil indispensable pour les personnes à motricité réduite (alitées ou paralysées), mais souvent complexe à calibrer et onéreux.

Cette solution permet d’interagir avec un ordinateur ou tout autre interface informatique, grâce au suivi oculaire, à partir d’une webcam.

 

Mise en oeuvre / Expertises mobilisées

Les modèles d’intelligence artificielle (Deep Learning) les plus récents sont exploités pour mesurer, avec une grande précision, la position et les angles d’orientation de la tête à partir des images de la webcam. 

Les pupilles sont également détectées permettant ainsi, de mesurer la direction des yeux et leurs clignements.

Enfin, la ligne de visée, formée par le visage et les yeux, est virtuellement prolongée jusqu’à l’écran et le pointeur de la souris se déplace alors. Les clics sont générés en clignant des yeux (gauche ou droit).

Demo Eye Tracking

Résultats

Deux modes de fonctionnement sont proposés :

1. Un contrôle du mouvement avec la tête et clics par clignement des yeux

2. Un contrôle total par les yeux.

 

Le module atteint une cadence de traitement de 30 images/secondes à une résolution HD (1080p). L’installation et les réglages sont très simples, ce qui rend son utilisation confortable et réactive pour naviguer sur un ordinateur.

La précision atteinte permet d’utiliser de nombreuses applications comme écrire sur un clavier virtuel, lire ses emails ou écouter de la musique.

La collaboration avec l’association EDICO a également permis de réaliser des premiers tests avec son fondateur Damien Perrier, lui-même atteint de SLA (maladie de Charcot). L’objectif de cette collabration est d’adapter l’ergonomie et l’utilisation du module pour les personnes en situation de grande dépendance.

 

Ces travaux ouvrent aussi la voie à de nombreuses autres applications basées sur le mouvement de la tête et des yeux : divertissement, aide à la conduite, etc.

« Lorem ipsum dolor sit amet, consectetur adipiscing elit. Fusce eu lacus diam. Cras congue, neque ac mattis efficitur, nibh ipsum fringilla nunc, sed iaculis neque odio non orci. Vestibulum ante ipsum primis in faucibus orci luctus et ultrices posuere cubilia Curae; Praesent lacinia, urna quis rhoncus lobortis, urna neque tempus tellus, quis auctor justo lectus vitae libero. Nulla non porta odio. Donec diam est, varius id ullamcorper a, efficitur nec libero »

Nom Prénom

Fonction – Entreprise

Quelques exemples de réalisations :

Projet de qualité de production

Projet visant à améliorer la fabrication de dispositifs médicaux

Sensapnea - projet européen sur l'apnée du sommeil

 Projet visant à améliorer l’analyse des données du patient

Projet Eye Tracking

Projet permettant d’interagir grâce au suivi oculaire

Covid XRay

Mise à disposition des scripts portant sur l’explicabilité des modèles dans le domaine médical