L’émission BBC Two Votre corps découvert avec Kate Garraway montre comment la technologie future pourrait se fondre dans les rendez-vous médicaux, mais à quel point sommes-nous proches de l’utilisation de la réalité augmentée (RA) dans nos hôpitaux ?

Dans l’émission, des médecins et des radiologues travaillent avec des artistes numériques pour créer des représentations 3D du corps des patients. Ensuite, le patient porte un Microsoft HoloLens pour voir ses membres et ses organes, tandis que son médecin lui explique exactement pourquoi et comment son état l’affecte.

Vous connaissez peut-être mieux l’utilisation de la réalité augmentée dans des applications telles que Pokémon Go, où les versions numériques des personnages Pokémon sont placées dans votre monde réel via l’appareil photo de votre smartphone. Et bien que la réalité augmentée et la réalité virtuelle fassent partie de plus en plus du métaverse, nous n’avons pas vu d’utilisations innovantes de la réalité augmentée apportées à nos téléviseurs jusqu’à présent.

Le Dr Stephen Quinn, gynécologue dans les hôpitaux du NHS Trust Imperial College, apparaît dans la nouvelle émission de Kate Garraway pour aider une patiente, Hilda, atteinte d’une maladie qui lui cause un gonflement de l’abdomen. Après avoir pris des scans minutieux du corps de Hilda, l’équipe est en mesure de lui montrer les excroissances, appelées fibromes, qui sont à l’origine de sa douleur.

« J’ai passé une grande partie de ma carrière à regarder des IRM de bassins, et avoir ces images est extrêmement utile en clinique », a déclaré Quinn. « Mais l’utilisation de la réalité augmentée a amené cela à un tout autre niveau. C’était fantastique de pouvoir visualiser exactement ce qui se passait dans le bassin avant la chirurgie pour enlever les fibromes. »

Malheureusement, la technologie est loin d’être disponible sur le NHS, mais Quinn a déclaré que l’utilisation de l’AR pourrait être courante au cours de la prochaine décennie.

Comment fonctionne la réalité augmentée ?

Pour le spectacle, les radiologues des hôpitaux impériaux ont fourni aux artistes des analyses approfondies de chaque patient. Le Dr Dimitri Amiras, radiologue consultant musculo-squelettique à l’Impériale, a également travaillé sur Votre corps découvert avec Kate Garraway.

Premièrement, les patients subiraient des examens de routine.

« Pour définir ce qu’est l’organe et où se trouve la pathologie, tout cela est fait par des radiologues. C’est nous qui l’identifions et examinons les techniques d’imagerie pour déterminer ce qui est un bon tissu, ce qui est un mauvais tissu », a déclaré Amiras.

« Ensuite, une fois que nous avons identifié ces images avec des éléments pertinents, les artistes numériques peuvent dessiner autour d’eux ou même utiliser l’intelligence artificielle pour créer toutes les jolies images et les trucs brillants. »

Une fois terminé, les patients et les médecins portaient un appareil AR pour «voir» la partie du corps devant eux. Chacun était en 3D et pouvait être agrandi ou dézoomé, pivoté et comparé aux mêmes zones sur un individu en bonne santé.

Trois personnes portant des casques de réalité augmentée se tiennent autour d'une représentation graphique 3D de certains fibromes dans un utérus

Une patiente de l’émission, Hilda, voit une représentation de son utérus à l’aide de véritables scans des fibromes qui poussent dans son corps © BBC / Remarkable TV

« Ce qui est excitant pour moi, c’est que beaucoup de gens ne connaissent pas le travail d’un radiologue », a déclaré Amiras. « C’est agréable pour les gens de s’enthousiasmer pour cela et pour l’imagerie. C’est ce que je fais au jour le jour – je regarde l’intérieur des gens en utilisant l’imagerie. C’est fascinant pour moi, et je pense que le reste du public trouverait cela fascinant s’il y avait plus de couverture télévisée. C’est probablement le premier programme qui a présenté principalement l’imagerie.

Quand les médecins généralistes pourront-ils utiliser la réalité augmentée dans les rendez-vous ?

Bien que cette technologie soit loin d’être utilisée dans la vie quotidienne, Quinn dit qu’elle est à l’horizon.

« [Augmented reality] la technologie est maintenant disponible et nous savons que les choses évoluent très rapidement. J’imagine qu’au cours des 5 à 10 prochaines années, il est probable que cela deviendra plus largement disponible. Nous savons que la RA sur les smartphones devient de plus en plus populaire.

« J’imagine que nous serions en mesure d’utiliser cela de manière beaucoup plus fiable lorsque nous arriverons à un point futur où les gens auront plus accès à des choses comme Google Glass ou d’autres types de technologies oculaires intelligentes. »

Cependant, une limitation sera la création des objets AR.

« Cela a pris beaucoup de temps, mettre en place les modèles et les faire fonctionner », a déclaré Amiras. « Bien qu’en termes de matériel, ce n’était probablement pas la partie la plus chère, en particulier en termes de soins de santé. Ce sont plus les heures passées à convertir les images en quelque chose de pertinent et facile à utiliser. »

La patiente Melina, le Dr Purkayasthar et Kate Garraway utilisent des casques de réalité augmentée pour regarder une représentation 3D du squelette de Melina

La patiente Melina, le Dr Purkayasthar et Kate Garraway utilisent des casques de réalité augmentée pour regarder une représentation 3D du squelette de Melina © BBC / Remarkable TV

Les universités utilisent la technologie pour apprendre aux étudiants en médecine à effectuer des chirurgies complexes, sans qu’un patient ait besoin de s’exercer.

« Il y a quelques années, nous utilisions la RA pour guider la chirurgie. Je travaillais en chirurgie plastique, dans l’équipe de reconstruction », a déclaré Amiras.

« Nous menons actuellement une étude avec l’équipe du sein, essayant de voir que la RA aidera à la reconstruction mammaire. Et puis l’autre chose que nous avons faite est d’aider les étudiants en radiologie à pratiquer l’utilisation d’un tomodensitomètre pour les biopsies. [Without AR] vous auriez besoin d’un tomodensitomètre, et ils coûtent plusieurs centaines de milliers de livres. Vous auriez également besoin de quelqu’un pour faire fonctionner ce tomodensitomètre, et vous risqueriez d’irradier la personne qui pratique [because the scan uses radiation].

« Nous avons donc développé une façon de le faire en utilisant Microsoft HoloLens, et cela aiderait les gens à se familiariser avant de pouvoir le faire sur des patients. »

Une personne portant un appareil de réalité augmentée tend la main vers une représentation 3D de ses propres poumons.

Une patiente, Rozi, a vu une version en réalité augmentée 3D de ses propres poumons © BBC / Remarkable TV

Bien sûr, la technologie ne fonctionnerait pas pour tous les rendez-vous chez le médecin.

« Il est difficile de dire à quelles conditions il se prêtera », a déclaré Amiras. « Évidemment, il y a des conditions qui sont plus difficiles à imaginer. Je pense que cela dépendra du patient. Certains seront très intéressés à le comprendre en 3D, certains patients se contenteront d’une explication verbale ou simplement d’une fiche d’information.

Quinn a dit qu’il est important de se rappeler que tout le monde ne voudra pas voir son intérieur.

« Je dis toujours à mes patients : ‘Êtes-vous content de regarder les images ensemble ?’ Et, pour l’anecdote, 9 patients sur 10 seront fascinés par leurs photos et voudront voir ce qui se passe. Mais il y en a environ 1 sur 10 qui ne veut pas voir », a déclaré Quinn.

«Cela rend la tâche plus difficile, et vous devez ensuite l’aborder d’une manière différente, car il est toujours important que les patients aient pleinement consenti avant de subir tout type de chirurgie. Mais nous pouvons utiliser des images, nous pouvons dessiner des diagrammes.

« La grande majorité veut vraiment autant d’informations que possible. C’est l’âge dans lequel nous vivons maintenant, les gens veulent être aussi bien éduqués que possible avant de se lancer dans n’importe quel type de procédure.

Comment voir mon corps en réalité augmentée ?

Alors que l’AR de l’émission a été spécialement commandée, Amiras a déclaré que les patients peuvent voir des représentations 3D de parties du corps sur The Visible Human Project.

« Je pense que cela a commencé lorsqu’un condamné à mort aux États-Unis a fait don de son corps à la science. Ils l’ont scanné après son décès et ont également fait une histologie – ils ont donc coupé beaucoup de tranches [of the body] puis les a transformés en objets 3D.

En savoir plus sur la réalité augmentée et virtuelle :