Sudarshan VasanthaKumar, étudiant en génie biomédical, a développé une interface gestuelle sans contact, basée sur la vision, conçue pour être utilisée dans des environnements médicaux stériles. Le système permet aux chirurgiens de faire pivoter, zoomer et inspecter des modèles médicaux 3D sans toucher une souris, un clavier ou un écran, répondant ainsi à un défi dans les salles d’opération où la stérilité est critique.
Le projet, appelé Bio-Vision, s’exécute entièrement dans un navigateur Web et utilise une webcam standard pour la saisie. Cela repose sur Google MediaPipe Suivi des mains basé sur l’IA avec 21 points de repère pour reconnaître les gestes, tandis qu’un Trois.js Le moteur de rendu 3D affiche les modèles anatomiques en temps réel. Il est important de noter que le système ne nécessite pas de matériel spécialisé tel que des caméras de profondeur, des casques VR ou des contrôleurs de mouvement, ce qui le rend accessible et peu coûteux.
L’objectif à long terme du projet est de démocratiser imagerie médicale en permettant une interaction sans contact sur des ordinateurs portables abordables, en particulier dans les cliniques rurales aux ressources limitées. Alors que le développement actuel se concentre sur le contrôle gestuel des modèles 3D existants, les futures versions visent à prendre en charge l’intégration des analyses médicales en temps réel, élargissant ainsi leur impact potentiel sur les flux de travail chirurgicaux.
Retrouvez l’histoire de Raspberry Pi dans cette vidéo :
