Uniwersytet Jagielloński – Collegium Medicum – nowy wymiar edukacji z HoloLens 2

Założony w 1364 roku Uniwersytet Jagielloński to jedna z najdłużej nieprzerwanie działających uczelni na świecie. Zgodnie z mottem „Inspirowani przeszłością – tworzymy przyszłość” Uniwersytet Jagielloński - Collegium Medicum kształci kolejne pokolenia lekarzy, ucząc ich korzystania z innowacyjnych technologii. Jedną z nich jest mieszana rzeczywistość (Mixed Reality, MR). Gdy szpitale sięgają po nowe narzędzia, UJ CM dostosowuje metody nauczania, pokazując studentom, jak z nich korzystać. „Stworzyliśmy w UJ CM laboratorium mieszanej rzeczywistości, w którym studenci i kadra medyczna mogą spojrzeć na trójwymiarową wizualizację danych medycznych przez okulary HoloLens 2” – wyjaśnia dr inż. Klaudia Proniewska z Wydziału Lekarskiego UJ CM.

Wejście w nowy wymiar medycyny

„Zwykle lekarze pracują z obrazami w 2D. Jednak nasz mózg działa w 3D. Dlatego obecne technologie obrazowania wymagają dodatkowego przetwarzania, aby w pełni odzwierciedlić trójwymiarową istotę struktur naszego organizmu” – mówi dr inż. Proniewska. Wyświetlając wysokiej wierności  hologramy organów pacjenta, MR wnosi trzeci wymiar do obrazowania medycznego. „Spojrzenie trójwymiarowe w głąb ludzkiego ciała może mieć istotny wpływ na proces  planowania przedproceduralnego, jak i monitorowania śródproceduralnego zabiegów, jak również na zaawansowaną edukację medyczną”– podkreśla dr inż. Proniewska. 

Rzeczywistość mieszana w służbie edukacji medycznej

W ramach projektu „Doskonały Uniwersytet”, realizowanego pod kierownictwem dr. Włodzimierza Moczurada i dr. Mariusza Trojaka z UJ, finansowanego z funduszy z Narodowego Centrum Badań i Rozwoju, zakupiono 10 sztuk okularów Hololens 2 wraz z oprogramowaniem firmy apoQlar do trójwymiarowej wizualizacji danych medycznych.

Dzięki tej inicjatywie studenci medycyny mogą eksperymentować z wysokiej wierności modelami 3D. Każdy z zestawów w najnowszej wersji wyposażony jest w system rozpoznawania mowy umożliwiający sterowanie bez użycia rąk. Pozwala to studentom robić notatki czy prowadzić wideokonferencję szybciej, wygodniej, a także bezpiecznej – bez dotykania okularów. Jako samodzielny moduł z łącznością Wi-Fi, HoloLens 2 umożliwia użytkownikom swobodne poruszanie. „Okulary są lekkie, mobilne i działają bezprzewodowo. Konfiguracja przebiega w kilku prostych krokach” – komentuje zastępca kierownika ApoQlar, Łukasz Radomski.

Z ankiety przeprowadzonej na Uniwersytecie Jagiellońskim, wynika że aż 63% wykładowców oraz 67% studentów biorących udział w badaniu uważa, iż nauka z rzeczywistością mieszaną ma przewagę nad tradycyjną edukacją.

W ramach projektu Doskonały Uniwersytet przygotowano ponad 20 przypadków medycznych wysokiej wierności wizualizowanych trójwymiarową technologią wyświetlania danych medycznych, tj. mieszana rzeczywistość, które dr inż. Proniewska wykorzysta w ramach ewaluacji projektu podczas planowanych zajęć dydaktycznych ze wsparciem lekarzy specjalistów z UJ CM.

Przygoda UJ CM z mieszaną rzeczywistością rozpoczęła się w 2018 r. Wtedy właśnie   przeprowadzano pionierską operację przy wykorzystaniu okularów mieszanej rzeczywistości w procesie planowania zabiegu leczenia ubytku w przegrodzie międzyprzedsionkowej (ASD) wykonanego przez zespół prof. Dariusza Dudka w Szpitalu Uniwersyteckim w Krakowie. „Mieszana rzeczywistość niewątpliwie zwiększy tempo, w jakim się uczymy, szczególnie kiedy możemy trójwymiarowo wizualizować najtrudniejsze przypadki medyczne” – podsumowuje dr inż. Proniewska.