Image Lumeto sans logo

Patients numériques pilotés par l'IA pour une formation expérientielle en soins de santé

Formation interactive pionnière dans le domaine des soins de santé grâce à l'IA et à la réalité étendue.

Résumé du projet

Mis à jour le 22er novembre 2024.

Le problème

Les systèmes de santé du monde entier sont confrontés à une pression sans précédent et doivent de toute urgence augmenter leurs effectifs. Les approches actuelles de formation des professionnels de santé impliquent des stages cliniques, des simulations physiques impliquant des mannequins haute fidélité et des simulations de patients acteurs. Ces approches sont coûteuses, difficiles à mettre en œuvre et nécessitent une expertise sur site, ce qui rend difficile de répondre à la demande. Les organisations de santé se tournent de plus en plus vers la réalité virtuelle (RV) et les plateformes de formation basées sur la réalité mixte pour former les professionnels de santé.

Comment nous le résolvons

Mené par Lumeto en collaboration avec Unity Health Toronto et l'Université du Manitoba, ce projet visera à construire le système de formation en soins de santé par l'IA le plus sophistiqué du marché grâce à la combinaison de l'IA et de la réalité étendue (XR).

Le projet améliorera la capacité déployée commercialement de Lumeto ImpliquerXR La plateforme comprendra des patients IA réalistes, dynamiques et validés cliniquement. Ces améliorations comprendront l'ajustement des modèles d'IA fondamentaux avec des données et des cas d'utilisation spécifiques aux soins de santé pour améliorer la qualité et la fiabilité des résultats, le développement de nouvelles intégrations complexes de fonctionnalités de communication non verbale pour améliorer de manière significative le réalisme, et l'amélioration de l'architecture et des interactions existantes intégrées dans les composants du système de base pour améliorer l'expérience utilisateur. Les patients IA améliorés qui en résulteront seront entièrement réactifs et interagiront avec les stagiaires lorsqu'ils évalueront, diagnostiqueront et traiteront les patients pour diverses pathologies.

S'appuyant sur leur premier prototype, les patients IA génératifs incluront des données de formation de haute qualité provenant des partenaires de santé du projet avec ses modèles d'apprentissage du langage (LLM) affinés. À l'aide d'un casque de réalité virtuelle, les stagiaires peuvent entrer dans un environnement clinique virtuel, comme une salle d'urgence, une unité de soins intensifs ou un cabinet d'hôpital, où ils peuvent accéder à une gamme complète d'outils médicaux. Dans cet environnement immersif, ils rencontrent des patients IA animés en 3D qui répondent verbalement et non verbalement à leurs demandes et actions - y compris plus de 10 tons de voix, des expressions faciales nuancées et la capacité de se conformer à des commandes telles que « lève la main ».

L’automatisation des aspects complexes de la formation clinique grâce à l’IA signifie que les systèmes de santé peuvent augmenter de manière exponentielle le nombre de personnes qu’ils peuvent former tout en maintenant leurs normes cliniques. Cette technologie visera à faciliter la formation des professionnels de santé à des compétences difficiles comme la gestion efficace de la communication avec les patients et la diversité, l’équité et l’inclusion (DEI).

Chef de projet

  • lumière

Partenaires du projet

  • unité santé e1633495774477
  • université du manitoba