KARVIMIO

Live-Bedienungsanleitung im OP-Saal

Mit Augmented Reality OP-Instrumente nutzen. ©FAU Nürnberg-Erlangen, Professur für Human-Centered Computing und Extended Reality.

Motivation

Für erfolgreiche medizinische Operationen muss das Fachpersonal seine Instrumente effektiv einsetzen können. OP-Instrumente sind jedoch vielfältig: Sie unterscheiden sich je nach Hersteller und sind in der Handhabung komplex. Fachpersonen müssen deshalb oft Bedienungsanleitungen anfordern und studieren. Das führt zu Unterbrechungen und beeinflusst die Qualität der Operation negativ.

Ziele und Vorgehen

Die Forschenden des Projekts KARVIMIO entwickeln ein Assistenzsystem, das Künstliche Intelligenz (KI) und Augmented Reality (AR) nutzt, um die Nutzung von Instrumenten zu vereinfachen. Ein Kamerasystem und Algorithmen können die Instrumente bei einer OP erkennen und identifizieren. Das System kann dann während einer Operation eine passende Bedienungsanleitung durch eine Datenbrille am Einsatzort anzeigen. So sollen längere Unterbrechungen verhindert werden. Die Forschenden werden das System durch mehrere Studien in Beispielsituationen evaluieren. Das System soll OP-Teams unterstützen und so die Qualität der Behandlung verbessern.

Innovationen und Perspektiven

Perspektivisch sollen Bedienungsanleitungen von OP-Instrumenten digitalisiert abgefragt werden können. Diese Innovation muss sich nicht nur auf den OP-Saal beschränken, sondern kann langfristig auf eine Vielzahl von Geräten und Instrumenten im medizinischen Bereich erweitert werden.