Forschungsthemen

Erklärbare Entscheidungen

Ein Deep Learning-basiertes Klassifikationsergebnis eines radiologischen Bildes, etwa in Kategorien wie "krank" oder "gesund", ist für den Nutzer bzw. die Nutzerin zunächst nicht nachvollziehbar. Neuronale Netze agieren als "Black Box" – die gelernten Merkmale eines Bildes, die zur Entscheidung des Netzwerkes führen, sind für den Menschen nicht interpretierbar.

VRVis entwickelt Methoden, die die Grundlagen für solche Entscheidungen eines neuronalen Netzes für den Nutzer bzw. die Nutzerin sichtbar machen. Diese Methoden geben nicht nur medizinischem Fachpersonal ein zusätzliches Feedback über die Sicherheit der Entscheidung, sondern helfen auch Entwicklerinnen und Entwickler, die Qualität des trainierten Netzwerkes zu überprüfen.

Publikation

Videos

Medienbericht

Analyse von Mammographie-Daten

Brustkrebs ist weltweit die am häufigsten auftretende Krebsart bei Frauen. Daher ist die genaue Analyse von Mammographie-Bildern eine wichtige Aufgabe in der Radiologie, da besonders das frühzeitige Erkennen von Risikofaktoren und verdächtigen Veränderungen der Brust von großer Bedeutung für eine erfolgreiche Therapie sind.

In Kooperation mit unserem langjährigen Partner Agfa HealthCare haben wir verschiedene Deep Learning-Ansätze für die Analyse von Mammographie-Daten entwickelt, die den Workflow einer radiologischen Befundung auf verschiedenen Entscheidungsebenen unterstützen. Dafür wurden mehrere Deep Learning-Modelle kombiniert, die sich jeweils auf spezifische medizinische Fragestellungen fokussieren, wie beispielsweise die Detektion krankhafter Läsionen und Mikroverkalkungen oder ob eine Patientin dichteres Brustgewebe besitzt. Dadurch können wir insgesamt eine verbesserte Aussage auf Patientenebene treffen. Der aufgabenspezifische Aufbau der Lösung und die Möglichkeit auch auf Teilentscheidungen zuzugreifen, erhöht gleichzeitig die Erklärbarkeit und damit das Vertrauen in die Gesamtentscheidung. Um das Vertrauen in einzelne Black-Box Deep Learning-Komponenten unseres Modells und deren Entscheidungen zu stärken, wurden von uns weitere neue Methoden für die Erklärbarkeit von KI-Entscheidungen entwickelt.

Publikation

Videos

Segmentierung von Weichteiltumoren in Multimodalen Daten

Die exakte Segmentierung von Weichteiltumoren in multimodalen Daten ist in verschiedenen Bereichen der Medizin von großer Bedeutung, zum Beispiel für die Operations- und Biopsieplanung oder in der Radiotherapie. Hierfür werden multimodale Daten aufgenommen, wie MRI und PET/CT, wobei die Segmentierung der Tumore je nach Modalität und medizinischer Fragestellung unterschiedlich sein kann.

In Kooperation mit der Medizinischen Universität Wien haben wir verschiedene Methoden zur Segmentierung von Weichteiltumoren entwickelt und verglichen. Wir haben uns hierbei speziell auf die Modalitäts- und Fragestellungs-abhängige Tumorsegmentierung fokussiert, und wie wir mit der Fusion multimodaler Daten die Qualität der Segmentierung verbessern können.

Publikationen

Videos

Tuberkulose-Detektion durch KI-gestützte Screenings

Um medizinisches Fachpersonal bei Patientenscreenings zur Erkennung von Tuberkuloseinfektionen zu unterstützen, hat VRVis gemeinsam mit Agfa Healthcare eine Deep Learning-basierte Anwendung entwickelt. Diese hilft gerade bei großen Patientenzahlen, erkrankte Personen schneller zu identifizieren, und so weitere Diagnose und Behandlungsabläufe zu optimieren.

Medizinische Bildregistrierung

Die Registrierung von medizinischen Bildern ist ein wichtiger Bestandteil von medizinischen Analyse-Workflows. Sie ermöglicht es, verschiedene Bilder eines oder mehrerer Patienten direkt vergleichbar zu analysieren, indem die Bilder in dasselbe Koordinatensystem transferiert werden. Die Registrierung ist notwendig, um Bilder zwischen verschiedenen Zeitpunkten aufgenommenen Studien oder zwischen verschiedenen Modalitäten zu vergleichen.

Das VRVis entwickelte in Koorperation mit seinen Partnern aus der Medizin Methoden zur klassischen und Deep Learning-basierten Bildregistrierung und untersuchte insbesondere, wie Visualisierung Registrierungsworkflows unterstützen und Probleme aufzeigen kann.

Publikationen

Segmentierung und Annotation von Blutgefäßen

Arteriosklerose ist laut WHO weltweit die Todesursache Nummer 1. Eine detaillierte Analyse von Blutgefäßen in 3D-Angiographien sind im Allgemeinen sehr zeitaufwändig. VRVis hat gemeinsam mit AGFA Healthcare mehrere Methoden zur effizienten semi- und vollautomatischen Segmentierung von peripheren und koronaren Blutgefäßen, sowie deren semantischer Annotation, entwickelt, die teilweise sowohl prämiert als auch hochkarätig publiziert, patentiert und in Produkte unseres Kunden integriert wurden.

Auswahl an Publikationen

Generelle Ansätze zur Merkmalsdetektion und Segmentierung von Organen

VRVis hat etliche grundlegende Methoden zur medizinischen Bildanalyse entwickelt und patentieren lassen. Darunter vielzitierte KI-Methoden zur gleichzeitigen Segmentierung mehrerer Objekte auf Röntgenbildern, sequenzielle Segmentierungsverfahren für CT-Bilddaten, effiziente Feature-Detektionsverfahren, sowie mehrere Grundlagenmethoden für statistische Form- und Texturmodelle, die z.B. auch heute noch in Kombination mit KI-Methoden für komplexe Aufgaben in der Organsegmentierung zur Anwendung kommen.

Auswahl an Publikationen

Vollautomatische semantische Annotation der Wirbelsäule

Die Wirbelsäule ist ein wichtiges Referenzsystem im menschlichen Körper, um bei einer radiologischen Untersuchung die Lage von Pathologien zu beschreiben. Dafür muss die anatomische Bezeichnung für jeden sichtbaren Wirbel im Bild bekannt sein. Diese muss in vielen Ländern von Radiologinnen und Radiologen manuell auf dem Bild eingetragen werden – eine zeitaufwändige Arbeit, die Radiologinnen und Radiologen zusätzlich zur eigentlichen Diagnose in einem knappen Zeitrahmen erledigen müssen. VRVis hat eine Gruppe von Algorithmen entwickelt, die menschliche Wirbel auf verschiedenen MR- und CT-Scans unabhängig vom Bildausschnitt vollautomatisch erkennen und anatomisch korrekt annotieren kann. Diese wichtige maschinelle Vorarbeit erleichtert Radiologinnen und Radiologen die Arbeit und verschafft mehr Zeit für die Diagnoseerstellung.

Auswahl an Publikationen

Herzanalyse

Herz-Kreislauf-Erkrankungen sind heute auch in Österreich die häufigste Todesursache. Eine detaillierte Analyse von (zeitabhängigen) 3D-Bilddaten des schlagenden Herzens und der Koronararterien eines Patienten ist extrem zeitaufwändig. Vollautomatische Methoden, die die Quantifizierung von Pathologien des Herzens erleichtern, können daher stark zur Beschleunigung der Befundung durch den Radiologen bzw. die Radiologin beitragen. VRVis hat bereits mehrere Lösungen für die Segmentierung der Herzkammern auf CT- und MR-Bildern sowie eine prämierte Lösung zur vollautomatischen Segmentierung von Koronararterien entwickelt.

Auswahl an Publikationen

Mehrere Patente zu KI

Aus unserer hauseigenen Grundlagenforschung sind in Verbindung mit unserer anwendungsorientierten Forschungsarbeit für unseren Unternehmenspartner Agfa Healthcare viele Patente für KI-basierte Lösungen entstanden, beispielsweise zur vollautomatischen Segmentierung und Annotation von Blutgefäßen oder menschlichen Wirbeln. Erfahren Sie hier mehr über unsere Patente.