Patients numériques pilotés par l'IA pour une formation expérientielle en soins de santé
Formation interactive pionnière dans le domaine des soins de santé grâce à l'IA et à la réalité étendue.
Résumé du projet
Mis à jour le 22er novembre 2024.
Le problème
Les systèmes de santé du monde entier sont confrontés à une pression sans précédent et doivent accroître leurs effectifs de toute urgence. Les méthodes actuelles de formation des professionnels de santé comprennent les stages cliniques, les simulations physiques avec des mannequins haute fidélité et les simulations avec des acteurs jouant le rôle de patients. Ces méthodes sont coûteuses, difficiles à déployer à grande échelle et nécessitent une expertise sur place, ce qui rend difficile de répondre à la demande. Les organismes de santé se tournent de plus en plus vers la réalité virtuelle (RV) et les plateformes de formation basées sur la réalité mixte pour former leurs professionnels de santé.
Comment nous le résolvons
Mené par Lumeto en collaboration avec Unity Health Toronto et l'Université du Manitoba, ce projet visera à construire le système de formation en soins de santé par l'IA le plus sophistiqué du marché grâce à la combinaison de l'IA et de la réalité étendue (XR).
Ce projet permettra d'enrichir la plateforme InvolveXR de Lumeto, déjà commercialisée, en y intégrant des patients virtuels réalistes, dynamiques et validés cliniquement. Ces améliorations comprendront l'optimisation des modèles d'IA fondamentaux à l'aide de données et de cas d'usage spécifiques au secteur de la santé afin d'améliorer la qualité et la fiabilité des résultats, le développement de nouvelles intégrations complexes de fonctionnalités de communication non verbale pour un réalisme accru, ainsi que l'amélioration de l'architecture et des interactions existantes au sein des composants principaux du système afin d'optimiser l'expérience utilisateur. Les patients virtuels ainsi enrichis seront pleinement réactifs et interagiront avec les stagiaires lors de l'évaluation, du diagnostic et du traitement de patients atteints de diverses pathologies.
S'appuyant sur leur premier prototype, les patients IA génératifs incluront des données de formation de haute qualité provenant des partenaires de santé du projet avec ses modèles d'apprentissage du langage (LLM) affinés. À l'aide d'un casque de réalité virtuelle, les stagiaires peuvent entrer dans un environnement clinique virtuel, comme une salle d'urgence, une unité de soins intensifs ou un cabinet d'hôpital, où ils peuvent accéder à une gamme complète d'outils médicaux. Dans cet environnement immersif, ils rencontrent des patients IA animés en 3D qui répondent verbalement et non verbalement à leurs demandes et actions - y compris plus de 10 tons de voix, des expressions faciales nuancées et la capacité de se conformer à des commandes telles que « lève la main ».
L’automatisation des aspects complexes de la formation clinique grâce à l’IA signifie que les systèmes de santé peuvent augmenter de manière exponentielle le nombre de personnes qu’ils peuvent former tout en maintenant leurs normes cliniques. Cette technologie visera à faciliter la formation des professionnels de santé à des compétences difficiles comme la gestion efficace de la communication avec les patients et la diversité, l’équité et l’inclusion (DEI).
