Alle News

DeepMB Press release

DeepMB: Ein Deep Learning Framework für hochauflösende optoakustische Bildgebung in Echtzeit

AI New Research Findings Computational Health Bioengineering IBMI

Forschende von Helmholtz Munich und der Technischen Universität München haben signifikante Fortschritte bei der Weiterentwicklung der hochauflösenden optoakustischen Bildgebung für den klinischen Einsatz erzielt. Ihr innovatives Deep-Learning-Framework, DeepMB, hat das Potenzial Patient:innen mit verschiedenen Krankheiten wie Brustkrebs, Duchenne-Muskeldystrophie und entzündlichen Darmerkrankungen zu helfen. Ihre Erkenntnisse wurden nun im Fachjournal Nature Machine Intelligence veröffentlicht.

 

Um Krankheiten zu verstehen und zu erkennen, verlassen sich Wissenschaftler:innen und medizinisches Personal oft auf bildgebende Verfahren wie Ultraschall oder Röntgen. Je nach Gewebe ist jedoch die Auflösung der resultierenden Bilder limitiert, weshalb eine vergleichsweise neue Methode namens optoakustische Bildgebung zum Einsatz kommt. Diese Methode kombiniert Ultraschall mit optischer Bildgebung durch Laserstrahlen und ist daher ein leistungsstarkes medizinisches Verfahren zur nicht-invasiven Beurteilung einer Vielzahl von Krankheiten, einschließlich Brustkrebs, Duchenne-Muskeldystrophie, entzündlichen Darmerkrankungen und vielen mehr. Diese Technologie bietet die Möglichkeit Patient:innen in der Klinik frühzeitig zu behandeln, jedoch ist die praktische Anwendung durch lange Bildverarbeitungszeiten behindert. Ein Team von Forschenden des Bioengineering Centers und des Computational Health Centers von Helmholtz Munich und der Technischen Universität München hat daher ein Deep-Learning-Framework (DeepMB) entwickelt, das es Klinikmitarbeiter:innen ermöglicht, hochauflösende optoakustische Bilder in Echtzeit zu erhalten. Die neue Entwicklung stellt einen bedeutenden Fortschritt auf dem Weg zur klinischen Anwendung dieser Technologie dar.

Von Prof. Vasilis Ntziachristos und seinem Forscherteam wurde die multispektrale optoakustische Tomographie (MSOT) am Helmholtz Munich und der Technischen Universität München entwickelt und wird von seinem Spin-off-Unternehmen iThera Medical GmbH vertrieben und gemeinschaftlich weiterentwickelt. Ein MSOT-Scanner nutzt den optoakustischen Effekt aus, bei dem Schallwellen erzeugt werden, wenn Licht von einem Material absorbiert wird. Das Gerät fängt die Schallwellen auf und generiert aus diesen mit einem sogenannten Rekonstruktionsalgorithmus Bilder, die auf dem Scanner-Monitor angezeigt werden. Leider liefern einfache Algorithmen, die Bilder in Echtzeit generieren, nur eine unzureichende Bildqualität. Im Gegensatz dazu brauchen komplexere Algorithmen, die hochauflösende Bilder produzieren, eine sehr lange Verarbeitungszeit und sind damit für den klinischen Alltag nicht praktikabel.

Die Lösung: Beschleunigte Optoakustische Bildgebung mit uneingeschränkter Bildqualität

Das neue neuronale Netzwerk DeepMB ist in der Lage, hochauflösende optoakustische Bilder etwa tausendmal schneller zu erzeugen als bisherige Verfahren der Bildrekonstruktion, ohne dass dabei die Bildqualität beeinträchtigt wird. Entscheidend für die verbesserte Leistung war dabei die Trainingsstrategie von DeepMB. Diese basierte auf optoakustischen Signalen, die aus verschiedenen Bildern realer Messungen generiert wurden und mit optoakustischen Bildern abgeglichen wurden, die aus den entsprechenden Signalen rekonstruiert wurden. Das resultierende Framework überwindet auch eine der Hauptherausforderungen der künstlichen Intelligenz: die Übertragbarkeit. Das bedeutet, dass DeepMB in der Lage ist, alle Patientenscans unabhängig vom untersuchten Körperteil oder der analysierten Krankheit, genau zu rekonstruieren.

Klinische Anwendung der optoakustischen Tomographie

Mit DeepMB bekommen Klinikmitarbeiter:innen erstmals die Möglichkeit Bilder mit der MSOT-Bildqualität aufzunehmen. Dies stellt einen bedeutenden Fortschritt für diese Technologie dar. Von der neuen Entwicklung werden nicht nur klinische Studien profitieren sondern letztlich wird DeepMB zu einer besseren Versorgung von Patient:innen führen. Die Grundprinzipien von DeepMB können zudem auf viele andere Rekonstruktionsmethoden in der optoakustischen Bildgebung angepasst werden, einschließlich weiterer Forschungsprojekte von Helmholtz Munich und selbst auf Bildgebungsverfahren wie Ultraschall, Röntgen oder Magnetresonanztomographie (MRT).

 

Original Publikation

Christoph Dehner, Guillaume Zahnd, Vasilis Ntziachristos, and Dominik Jüstel (2023): A deep neural network for real-time optoacoustic image reconstruction with adjustable speed of sound. Nature Machine Intelligence. DOI: 10.1038/s42256-023-00724-3

About the scientists

Prof. Dr. Vasilis Ntziachristos, Direktor am Institut für Biologische und Medizinische Bildgebung und Direktor des Bioengineering Centers von Helmholtz Munich und Professor für Biologische Bildgebung an der Technischen Universität München (TUM) 

Dr. Dominik Jüstel, Gruppenleiter am Institut für Biologische und Medizinische Bildgebung bei Helmholtz Munich und am Lehrstuhl für Biologische Bildgebung an der Technischen Universität München (TUM) 

 

Funding information

This project has received funding from the Bavarian Ministry of Economic Affairs, Energy and Technology (StMWi) (DIE-2106-0005// DIE0161/02, DeepOPUS) and from the European Research Council (ERC) under the European Union’s Horizon 2020 research and innovation programme under grant agreement No 694968 (PREMSOT).

[Translate to German:]
Prof. Dr. Vasilis Ntziachristos

Direktor des Instituts für Biologische und Medizinische Bildgebung, Direktor des Bioengineering Centers

Profil anzeigen
Dominik Jüstel
Dr. Dominik Jüstel

Gruppenleiter AI in Optoacoustics

Profil anzeigen

Verwandte Nachrichten

Multiple Myeloma

New Research Findings, Bioengineering, IBMI,

Neue labelfreie Bildgebung ermöglicht präzise Bewertung der Krebsbehandlung in Einzelzellen

Forschende von Helmholtz Munich und der Technischen Universität München haben eine neue Methode entwickelt, um die Reaktionen auf Krebsbehandlungen in einzelnen Zellen zu verfolgen – ganz ohne Farbstoffe oder Marker. Ihre MiROM-Technologie ermöglicht…

Awards & Grants, Bioengineering, IBMI,

Vasilis Ntziachristos ist neues Mitglied der Leopoldina

Seit März 2024 ist Vasilis Ntziachristos Mitglied der Nationalen Akademie der Wissenschaften Leopoldina. Diese Anerkennung zählt zu den höchsten Auszeichnungen für Wissenschaftler:innen und wird nach einem sorgfältigen, mehrstufigen Auswahlverfahren…

HMGU_Icon_Bioengineering

Featured Publication, Bioengineering, IBMI,

Nicht-invasive Glukosemessung im Blut

Forschende haben eine nicht-invasive Methode zur Messung des Blutzuckerspiegels im Blut entwickelt.

 

RSOM-Aufnahmen von Haut eines gesunden Probanden (links), eines Patienten mit Diabetes (mitte) und eines Patienten mit Diabetes und Neuropathie (rechts).

AI, New Research Findings, Bioengineering, IBMI,

Diabetes untersuchen mit Hautscanner und KI

Veränderungen von kleinen Blutgefäßen sind eine häufige Auswirkung von fortschreitendem Diabetes. Forschende von Helmholtz Munich und der Technischen Universität München (TUM) haben jetzt ein Verfahren entwickelt, mit dem sich solche mikrovaskulären…

HMGU_Icon_Bioengineering

Featured Publication, Bioengineering, IBMI, Pioneer Campus,

Bioengineering: Die treibende Kraft zur Beschleunigung klinischer Translation

Mehr zu der Nachricht in englisch hier. 

RSOM image of psoriatic skin

Bioengineering,

Unter die Haut: Bessere Behandlung von Schuppenflechte mit neuer Scanner-Technologie

Eine klinische Studie bestätigt den Erfolg eines von Helmholtz Munich und der Technischen Universität München (TUM) entwickelten Scanners für die Behandlungskontrolle von Schuppenflechte. Mit der neuen Technologie blicken Ärzt:innen tiefer in die…

Chain of amino acid or bio molecules called protein - 3d illustration

New Research Findings, Bioengineering, IBMI,

Ein Licht im dunklen Gewebe: Schaltbare Proteine für die biomedizinische Bildgebung

Biomedizinische Bildgebung hat das Ziel, das Verborgene sichtbar zu machen. Mithilfe bildgebender Verfahren können wir in das Innere von Organismen sehen, sogar einzelne Zellen können sichtbar werden. Eine der größten Herausforderungen ist es, wenige…