Pierwszy test Virtual Surgery Instructors – Wirtualnego Istruktora Chirurgii

 

Ordynatorzy dr Patrick House (Wydział Epilepsji i Neurologii, Szpital Ewangelicki Alsterdorf Hamburg) i dr Hans-J. von Lücken (Chirurgia Głowy i Szyi, szpital Marii Hamburg) spotkali się w dniu 24.07.2017 w firmie ApoQlar, aby po raz pierwszy przetestować funkcje VSI – Wirtualnego Instruktora Chirurgii.

 

Prezentacja

Pierwszym celem było przetestowanie jakości prezentacji obrazów trójwymiarowych tomografii komputerowej/obrazowania magnetyczno-rezonansowego w wirtualnych okularach HoloLens. Lekarze obejrzeli szczegółowo różne orbity głowy i zanurzyli się w pojedyncze powłoki w czasie obrazowania magnetyczno-rezonansowego. Obrazowanie magnetyczno-rezonansowe ma grubość powłoki 1,1 mm a drugie 0,9mm. Przy tym stwierdzono ogromne różnice jakości. Obrazowanie magnetyczno-rezonansowe z grubością powłoki 0,9 zrobiło przez jakość prezentacji i przez szybkość prezentacji o wiele większe wrażenie i okazało się wyższej jakości niż drugie urządzenie.

3D ct mrt hololens VSIFunkcje

Potem lekarze obejrzeli dokładnie funkcje VSI – wirtualnego instruktora chirurgii. Te są przyporządkowane w dwóch głównych kategoriach: tryb Free Mode i tryb Fix Mode

Tryb – Free mode

Tryb Free Mode służy do przygotowania operacji, może być także stosowany w rozmowie z pacjentem lub podczas operacji. Przy tym obraz CT/MRT tomografii komputerowej/obrazowania magnetyczno-rezonansowego można swobodnie zobaczyć w 3D, można go przesuwać, obracać, powiększać i zmniejszać. Najważniejszymi funkcjami są jednak Slide i funkcja Onion. Umożliwiają one wizualne zanurzenie się do pojedynczych warstw obrazu tomografii komputerowej/obrazowania magnetyczno-rezonansowego. Funkcja Onion pokazuje pojedyncze warstwy z zewnątrz do wewnątrz. Tak więc można warstwa po warstwie zbliżyć się do leczonego miejsca. Dla funkcji Slide – jest wirtualna skrzynka – Box (Cube), za pomocą której można przesuwać się względnie zanurzać się w warstwy i rozciąć obraz trójwymiarowy we wszystkich wariantach.

Tryb – Fix mode

Fix Mode jest zaprojektowana dla samej operacji. Dzięki temu chirurg może umieścić 3-wymiarową tomografię komputerową/obrazowania magnetyczno-rezonansowego na pacjencie. Za pomocą Vuforia są umieszczane na głowie trzy wirtualne punkty orientacyjne i obraz tomografii komputerowej/obrazowania magnetyczno-rezonansowego jest projektowany w tym miejscu. Także w trybie Fix Mode chirurg może za pomocą przeźroczy dotrzeć do pojedynczych warstw tomografii komputerowej/obrazowania magnetyczno-rezonansowego. To umożliwia mu głęboki wgląd do struktur tkanki pacjenta także podczas operacji.

Obaj ordynatorzy Dr. Patrick House und Dr. Hans von Lücken wzajemnie wypróbowali tryb Fix Mode i przy tym ustawili obraz tomografii komputerowej/obrazowania magnetyczno-rezonansowego jaśniej/ciemniej/bardziej przeźroczyście i suwakiem przeszli przez pojedyncze warstwy.

Sterowanie mową

Około 30% funkcji można sterować mową. Lekarze mogli to także przetestować i stwierdzili, że znacznie praktyczniej jest, sterowanie gestami, szczególnie w sali operacyjnej. W sumie sterowania mową pod względem technicznym wypadło zdumiewająco dobrze i koncentrujemy się w firmie apoQlar na tym, aby je jeszcze rozbudować.

Podsumowanie

Jeśli chodzi o jakość obrazu, funkcje i sterowanie mową jesteśmy na dobrej drodze i mogliśmy zrobić wrażenie na lekarzach. Funkcja Vuforia jest jednak za skomplikowana, dlatego skupimy się na automatycznym rozpoznawaniu punktów orientacyjnych za pomocą algorytmów rozpoznawania obrazu. Dodatkowo instalujemy obok funkcji Box – skrzynki(Cube), także kulę (sferę), aby umożliwić lekarzom i chirurgom szczególnie komfortowy i dostosowany wgląd do tomografii komputerowej/obrazowania magnetyczno-rezonansowego.