Universitätsklinikum Bonn

Einsatz von VR-Technologie zur Transformation in der medizinischen Versorgung

Ziel

Das Universitätsklinikum Bonn (UKB) ist eine führende deutsche medizinische Einrichtung mit 38 Kliniken und 31 Instituten. Das UKB ist international für seine Forschung und Lehre bekannt und verbindet medizinische Fortschritte mit der Versorgung der Patienten. Durch den Einsatz von NVIDIA CloudXR nutzt das UKB virtuelle Umgebungen, um Chirurgen und Medizinstudenten zu schulen und sie auf Eingriffe vorzubereiten.

Partner

Das UKB

Anwendungsfall

Gesundheitswesen

Technologie

NVIDIA CloudXR, NVIDIA A40 Grafikprozessoren

UKB nutzt NVIDIA CloudXR und Medicalholodeck-Lösungen in der Ausbildung von Ärzten

Das UKB behandelt jährlich rund 420.000 ambulante und 50.000 stationäre Patienten sowie 40.000 Notfallpatienten und hat den dritthöchsten Casemix-Index (durchschnittl. Fallschwere) in Deutschland. Um diese Patienten bestmöglich zu versorgen, hat das UKB Methoden erforscht, um seine Chirurgen besser auf verschiedene Aufgaben und Herausforderungen vorzubereiten.

Dieser besondere Anspruch nach kontinuierlicher Weiterbildung führte Dr. Jan Arensmeyer und Dr. Philipp Feodorovici in die Welt der erweiterten Realität (XR). Das Personal des UKB wurde darin geschult, Fälle von Echtzeit-Bildrekonstruktionen mithilfe von Medicalholodeck zu nutzen, welche via NVIDIA CloudXRTM gestreamt werden. Dies liefert hochwertige, immersive XR-Erlebnisse über 5G- und WLAN-Netzwerke.

Die Implementierung erfolgte im Rahmen des UKB-Projekts Innovative Secure Medical Campus (ISMC).

Image courtesy of UKB

Erhöhte Präzision bei medizinischen Verfahren dank VR

Als Chirurgen einer führenden medizinischen Einrichtung sieht sich das medizinische Team des UKB mit einer Vielzahl von komplizierten und anspruchsvollen chirurgischen Eingriffen konfrontiert. Im Bereich der Thoraxchirurgie, also für Operationen an Organen im Brustkorb, darunter Herz, Lunge und Speiseröhre, erfordern Eingriffe enorme Präzision und Genauigkeit.

Operationen dieser Natur in 3D planen zu können, hat erhebliche Vorteile. Die Kombination von Medicalholodeck und CloudXR ermöglicht es dem Klinikpersonal, die Menge an notwendiger Hardware und Kosten zu reduzieren. Die einzige Hardware, die die Anwender jetzt noch benötigen, ist ihr bevorzugtes VR-Headset und eine stabile Internetverbindung.

Dr. Arensmeyer und Dr. Feodorovici haben die VR-Technologie in ihre regulären Chirurgie-Vorlesungen integriert. Hierbei konnten die Studenten mit Nachbildungen komplexer medizinischer Bilder in einer virtuellen 3D-Welt interagieren.

Die Einbindung von VR in den Trainingsprozess ermöglichte es sowohl erfahrenen Chirurgen als auch den Studenten, sich dank leistungsstarken Visualisierungen auf die verschiedensten Herausforderungen vorzubereiten. Durch die Einbindung von CloudXR in Medicalholodeck eröffnet sich eine neue Welt der Möglichkeiten und gleichzeitig werden Kosten reduziert.

Mit Spatial Computing lassen sich neue Bereiche der Chirurgie erschließen

Medicalholodeck nutzt integrierte KI, um DICOM-Bilder und -Videos zu rekonstruieren – wie z. B. CT- und MRT-Scans (DICOM: Digital Imaging and Communications in Medicine). Ein großer Vorteil dieser Echtzeit-Rekonstruktion für Chirurgen ist, dass sie die Umgebung nicht importieren oder verändern müssen. Die Durchführung von Echtzeit-Rekonstruktionen für große Datensätze erfordert eine enorme GPU-Leistung. Das Team des UKB setzt NVIDIA A40-GPUs in einem Supermicro-System ein, das mit der Unterstützung des NVIDIA ELITE-Partners SVA System Vertrieb Alexander GmbH konfiguriert und eingesetzt wurde, um die schweren VR-Workflows zu unterstützen.

Mit CloudXR auf dem Campus des Krankenhauses trainieren alle Ärzte mit den Originaldaten in einer Hochleistungsumgebung ohne Latenz. „Diese einzigartige medizinische XR-Cloud-Lösung wurde unter Berücksichtigung der höchsten Datensicherheits- und Datenschutzstandards Deutschlands entwickelt“, sagte Dr. Feodorovici.

Chirurgen können jederzeit und von überall aus mit Studenten in Verbindung treten und können Techniken auf der Grundlage von 3D-Daten realer Patienten in einer vollständig immersiven virtuellen Umgebung lehren.

„Für Echtzeit-Chirurgie-Trainings braucht es GPUs in hoher Qualität, um sie für die immersive Erfahrung zu verwenden“, sagt Dr. Arensmeyer. Durch den Einsatz von CloudXR haben wir Zugang zu Umgebungen in höchster Originaltreue, welche auf den A40 GPUs in bester Qualität laufen. Dabei besticht CloudXR durch geringe bis zu null Latenz, was entscheidend ist, denn es hilft den Chirurgen dabei, voll und ganz in ihren virtuellen Eingriff einzutauchen.

Durch Medicalholodeck, das auf hauseigenen Servern und via CloudXR gestreamt wird, können die Chirurgen virtuell sowohl auf dem Campus als auch außerhalb davon zusammen an den Planungen ihrer chirurgischen Eingriffe weiterarbeiten.

In einer vom UKB geführten Umfrage unter 100 Studierenden im Bereich der Thoraxchirurgie gaben fast 100 Prozent der Befragten an, dass ihnen die Technologie nicht nur sehr half, sondern dass ihnen die Erfahrung auch sehr viel Spaß bereitete. Dr. Arensmeyer sagte: „Die Studierenden können die Inhalte besser verinnerlichen und es ermutigt die jungen Studierenden, die sich für chirurgische Berufe interessieren, in dem Bereich Erfahrungen sammeln und ihn erkunden zu können.“

Mit der Plattform von Medicalholodeck und CloudXR hat das UKB-Personal viele Verbesserungen verzeichnet, darunter:

  • Vollimmersive Operationsplanung: Damit Chirurgen gründlich mit VR trainieren können, benötigen sie eine vollständig immersive Operationserfahrung. Mit Medicalholodeck und CloudXR können sie einen Eingriff so planen, als ob sie ihn bei einem echten Patienten durchführen, da es wenig bis gar keine Latenz beim Streaming gibt.
  • Leistungsstarke GPU-Unterstützung: Dank 6 bis 8 NVIDIA A40-GPUs kann das UKB-Personal den hohen Bedarf an GPU-Leistung bei medizinischen Bildgebungsverfahren in Echtzeit decken.
  • Unterhaltsames Lernen: Das UKB-Team konnte feststellen, dass Lehrpläne, die VR einbeziehen, Studenten und jungen Berufstätigen erheblich dabei helfen, Anatomie und den chirurgischen Ansatz zu verstehen und das Gelernte zu verinnerlichen, besser als bei herkömmlichen Lehrmethoden.

Image courtesy of Medicalholodeck INC.

Das Bundesland Nordrhein-Westfalen, das die höchste Dichte an Universitätskliniken in Deutschland aufweist, fördert das Projekt am UKB. Im vergangenen Jahr erhielt das Klinikum vom Ministerium für Wirtschaft, Industrie, Klimaschutz und Energie Nordrhein-Westfalen Fördergelder in Höhe von 17,5 Millionen Euro für das in Deutschland einzigartige Digitalisierungs-Leuchtturmprojekt. Ziel ist es, Trainings, die XR einbeziehen im Vergleich zu traditionellen Lernmethoden, zu evaluieren.

Dr. Feodorovici erklärte, dass KI und XR in den Operationen der Zukunft von entscheidender Bedeutung sein würden und erwähnte des Weiteren seinen jüngsten Besuch auf einer Konferenz für Herz-Thorax-Chirurgie. Er stellte den Anwendungsfall der VR-Technologie im Unterricht und in der Chirurgie des UKBs vor und begeisterte das Publikum damit.

„Alle sind sich einig, dass hierin die Zukunft der medizinischen Ausbildung liegt“, sagte Dr. Feodorovici, „Mit unseren Partnern Medicalholodeck und SVA arbeiten wir derzeit daran, die Grenzen der VR zu überschreiten. Wir wollen das aktuelle CloudXR-Setup für Mixed-Reality-Anwendungen übernehmen und damit kollaborative, präoperative Planungen noch weiter verbessern und chirugische Navigation ermöglichen.“

Da die Lösung Bilder im DICOM-Format einsetzt, stehen die Chancen gut, dass XR den medizinischen Standard bei Operationen maßgeblich beeinflussen wird.

„Mit CloudXR erhalten wir Zugriff zu Umgebungen mit höchster Originaltreue, die auf A40-GPUs in der bestmöglichen Qualität laufen.“

Dr. med. Jan Arensmeyer,
UKB

Sind Sie bereit?

Um mehr über die Streaming XR-Lösung von NVIDIA zu erfahren, besuchen Sie:
www.nvidia.com/CloudXR