?

EndoPlan-3D entwickelt eine KI-gestützte, interaktive 3D-Umgebung zur verbesserten Planung endoskopischer Eingriffe bei gastrointestinalen Frühneoplasien. Durch die KI-gestützte Fusion multimodaler Daten aus Wei?licht-Endoskopie und Endosonographie entstehen individuelle, dynamische 3D-Modelle.
Diese sollen ?rztinnen und ?rzten in einer VR-Umgebung helfen, Tumorgrenzen, kritische Hotspots und optimale Resektionsstrategien sicher zu identifizieren. Die Universit?t Augsburg leitet im Projekt den partizipativen Designprozess. Durch Interviews und Co-Design-Workshops mit Endoskopie-Expertinnen und -Experten wird eine interaktive 3D-Umgebung entwickelt, die die Operationsvorbereitung praxisnah unterstützt. Sprachdaten aus dem lauten Mitdenken w?hrend der Planung werden mithilfe von Large- Language-Modellen analysiert, um sprachgestützte Annotationen zu erm?glichen. Au?erdem wird das an der Universit?t Augsburg entwickelte Annotationstool NovA eingesetzt, um chirurgische Planungsprozesse strukturiert zu erfassen - einschlie?lich zeitlich markierter kritischer Ereignisse, die für Planung und Durchführung besonders relevant sind.? Darüber hinaus verantwortet die Universit?t Augsburg die Untersuchung ethischer, rechtlicher und sozialer Aspekte (ELSA) und die Erstellung entsprechender Leitlinien für die klinische Integration.