Im Forschungsprojekt DAIOR arbeiten das Fraunhofer IPA zusammen mit Partnern daran, den Operationssaal der Zukunft mithilfe von Künstlicher Intelligenz (KI) und roboterassistierter Telechirurgie zu realisieren. Dabei sollen chirurgische Daten aus multimodalen Quellen mit KI-Methoden kontinuierlich analysiert werden, um Operationen in Echtzeit zu unterstützen.
Daten zu nutzen, um medizinisches Personal bei der Behandlung oder bei der Operation eines Patienten zu unterstützen, ist das Ziel des Projekts DAIOR. Das Akronym ist die Abkürzung für »Distributed Artificial Intelligence for the Operating Room«: Durch die Analyse von Daten, Optimierung von Workflows und die Nutzung von Erfahrungswerten aus früheren Operationen sollen Algorithmen trainiert werden. Auf diese Weise kann KI dem klinischen Personal in Echtzeit und standortunabhängig helfen, die Versorgung der Patienten und Patientinnen zu verbessern. In dem interdisziplinären Konsortium mit Fachkompetenzen aus Medizin und Technik arbeiten das Fraunhofer-Institut für Produk¬tionstechnik und Automatisierung IPA zusammen mit dem Institute of Image-Guided Surgery (IHU) in Strasbourg und dem Bosch Digital Innovation Hub (KTBW) am Bosch Health Campus (Stuttgart). Das Projekt wird durch das Bundesministerium für Bildung und Forschung gefördert.
Lokales Wissen als ortsübergreifende Trainingsdaten für KI-Modell
Die Nutzung medizinischer Daten ist meist auf einen Standort begrenzt. Behandlungen sind standortabhängig, da es im Gesundheitswesen kaum Möglichkeiten zum Datenaustausch gibt. Eine weitere Herausforderung sind die verschiedenen Formate der Daten wie Bilder, Texte und Videos. Diese erschweren es, Zusammenhänge zu erkennen und für die Behandlung von Patientinnen und Patienten zu nutzen. Damit das nicht so bleibt, werden im Projekt DAIOR KI-Modelle mit verteilten Lernansätzen mit dem lokal verfüg¬baren Wissen trainiert.
»Das Wissen kann so anderweitig verwendet werden, ohne dass sensible Daten den jeweiligen Standort verlassen«, sagt Johannes Horsch, Leiter Medizintechnische Assistenz-systeme am Fraunhofer IPA. So werde verteiltes Wissen gebündelt und ortsunabhängig verfügbar gemacht. »Durch die Methoden des föderalen Lernens können in DAIOR Trainingsdaten aus verschiedenen Standorten, sogar über Ländergrenzen hinweg genutzt werden, während die Daten an den Standorten verbleiben und so gleichzeitig der Schutz für die Daten von Patientinnen und Patienten sichergestellt ist.«
Standortunabhängige Operationen mit roboterassistierter Telechirurgie
Die Zusammenarbeit zwischen Fraunhofer IPA und des IHU Strasbourg ist durch das seit dem Jahr 2022 laufende Gemeinschaftsprojekt »5G-OR« bereits erfolgreich etabliert. Die dort implementierte 5G-Infrastruktur wird genutzt, um Operationen aus der Ferne durchzuführen. Für die ortsübergreifende roboterassistierte Telechirurgie wird in DAIOR ein KI-Modell entwickelt, das Verzögerungen in der Datenkommunikation auf beiden Seiten kompensieren kann, indem es die darauffolgenden Schritte voraussagt. »Das funktioniert ähnlich wie unser Gehirn«, erklärt Horsch. »Unser Gehirn berechnet ständig unmittelbar mögliche Szenarien. Genauso agiert auch die KI.« Diese werde kontinuierlich in Echtzeit mit Daten versorgt und sei daher in der Lage, die nächsten Schritte vorher¬zusagen und Operateurinnen und Operateuren zu assistieren.
Mit dieser roboterassistierten Telechirurgie könnten schon bald Operationen standort-unabhängig über das Internet durchgeführt werden. Damit wird es möglich, freie OP-Kapazitäten flexibel zu nutzen: Operationen können schneller durchgeführt und Patienten besser medizinisch versorgt werden. »Das ist ein Meilenstein in der Versor¬gung von Patienten, besonders in der Notfallmedizin, bei der es oft auf Sekunden an¬kommt, beispielsweise bei einem Herzinfarkt oder Schlaganfall«, so Horsch. Außerdem kommt den Patienten zugute, dass das klinische Personal mehr Zeit für die Behandlung zur Verfügung hat.
Langjährige deutsch-französische Kooperation
Neben dem Gemeinschaftsprojekt »5G-OR« ist DAIOR bereits die zweite langjährige Kooperation zwischen Fraunhofer IPA und IHU Strasbourg. DAIOR vertieft die deutsch-französische Zusammenarbeit und stärkt den internationalen Technologie- und Wissenstransfer.
Das multidisziplinäre IHU Strasbourg forscht an innovativen bildgesteuerten Therapien für die Patientenversorgung. Es entwickelt minimal-invasive Präzisionseingriffe, die durch Technologien der virtuellen Realität, Robotik und Künstlichen Intelligenz optimiert werden. Neuartige von der IHU angelegte Patientenpfade, die die »Reise« des Patienten (engl. Patient Journey) durch das Krankenhaus von der Aufnahme bis zur Entlassung beschreibt, führen zu einer beschleunigten Diagnose, ambulanten statt stationären Operationen und einer verbesserten postoperativen Rehabilitation.
Klinische Gesundheitstechnologien und Robotik gehören zu den strategischen Themenbereichen des Fraunhofer IPA. Das Institut sieht in der KI die Möglichkeit, insbesondere Chirurginnen und Chirurgen durch intelligente Assistenzsysteme stärker zu unterstützen und Teilschritte der Operationen zu automatisieren. Dabei wurde die Telechirurgie als wichtiger Meilenstein identifiziert, da diese bereits die zur Automatisierung notwendige Infrastruktur umfasst und es erlaubt, große Datenmengen der Interventionen zu sammeln.
Das Bosch Digital Innovation Hub (KTBW) ist eine agile Innovations- und Implementierungs-einheit am Bosch Health Campus (Stuttgart) mit engen, langjährigen und erfolgreichen Kooperationen mit beiden zuvor genannten Institutionen und jahrelangen Vernetzungen in das Mannheimer und Strasbourger Ökosystem. Sie hat das Ziel, die Umsetzungsrate von Forschungsprojekten insbesondere im Bereich digitaler und KI-Innovationen im Gesundheitswesen zu erhöhen und fungiert dabei als Katalysator für KI- und digitale Gesundheitsinnovationen und innovative Versorgungskonzepte.
Steckbrief
Projekt: »DAIOR – Distributed Artificial Intelligence for the Operating Room« (zu Deutsch: »Verteilte Künstliche Intelligenz für den Operationssaal«)
Projektlaufzeit: 01.07.2023 bis 30.06.2027
Projektpartner: Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V., Robert Bosch Gesellschaft für medizinische Forschung mbH – Koordinierungsstelle Telemedizin Baden-Württemberg (KTBW), Institut Hospitalo-Universitaire de Strasbourg
Fördervolumen: 1 284 017 €
Fördergeber: Bundesministerium für Bildung und Forschung
Johannes Horsch | Telefon +49 621 17207 146 | johannes.horsch@ipa.fraunhofer.de | Fraunhofer-Institut für Produktionstechnik und Automatisierung IPA | www.ipa.fraunhofer.de
https://anr.fr/Project-ANR-22-FAI1-0001
https://gesundheitstechnologien.ipa.fraunhofer.de/
https://www.softwaresysteme.dlr-pt.de/de/forschungsvorhaben.php
https://www.digitale-technologien.de/DT/Navigation/DE/ProgrammeProjekte/Internat...
Experimenteller Hybrid-OP des Fraunhofer IPA in Mannheim.
Quelle: Fraunhofer IPA
Experimenteller Hybrid-OP des Fraunhofer IPA in Mannheim.
Quelle: Fraunhofer IPA
Criteria of this press release:
Business and commerce, Journalists, Scientists and scholars
Information technology, Mechanical engineering, Medicine
transregional, national
Cooperation agreements, Research projects
German
You can combine search terms with and, or and/or not, e.g. Philo not logy.
You can use brackets to separate combinations from each other, e.g. (Philo not logy) or (Psycho and logy).
Coherent groups of words will be located as complete phrases if you put them into quotation marks, e.g. “Federal Republic of Germany”.
You can also use the advanced search without entering search terms. It will then follow the criteria you have selected (e.g. country or subject area).
If you have not selected any criteria in a given category, the entire category will be searched (e.g. all subject areas or all countries).