Forschung | AAU Campus

Projekt: Relevance Detection of Ophthalmic Surge...

Stammdaten

Englisch

Titel:	Relevance Detection of Ophthalmic Surgery Videos (OVID)
Beschreibung:	In an interdisciplinary research project, computer scientists and physicians collaborate to develop and evaluate methods for automatic detection of relevant temporal segments in ophthalmic surgery 1 videos (OSVs). The main objective is the creation of relevance models allowing to detect video segments that are relevant for educational, scientific, or documentary purposes in medicine. Relevance models are produced by machine learning algorithms, which are trained using OSVs that were annotated by surgeons. Important instances of relevant OSV segments are irregular operation (OP) phases, which deviate from the usual procedure used in quasi-standardized ophthalmic surgeries. The automatic detection and classification of irregularities that occur more frequently and hence allow training of machine learning algorithms, provide an additional benefit for the creation of OSV datasets targeted at medical education or research. The development and evaluation of automatic classifiers of irregularities therefore represents another research objective of this project. Relevance models can be used to compress and store OSVs efficiently. This project will develop and evaluate appropriate methods and algorithms to achieve this goal. Finally, we want to demonstrate that relevant OSV segments are useful for medical research by addressing three specific medical research questions related to a certain type of ophthalmic surgery (cataract) using video analysis.
Schlagworte:	Multimedia, Video content analysis, Machine learning, Biomedical engineering, Surgery videos, Computer vision

Kurztitel:	OVID
Zeitraum:	01.10.2018 - 31.03.2023
Kontakt-Email:	ks@itec.aau.at
Homepage:	http://ovid.itec.aau.at/

MitarbeiterInnen

Funktion

Zeitraum

(intern)

Projektleiter/in

01.10.2018 - 31.03.2023

(intern)

Projektleiter/in

01.10.2018 - 31.03.2023

(intern)

wiss. Mitarbeiter/in

01.10.2018 - 30.11.2021

(intern)

stud. Mitarbeiter/in

01.10.2018 - 31.12.2020

(intern)

wiss. Mitarbeiter/in

01.06.2019 - 30.11.2021

(intern)

wiss. Mitarbeiter/in

01.11.2020 - 31.07.2021

(intern)

stud. Mitarbeiter/in
stud. Mitarbeiter/in

05.08.2019 - 05.02.2020
14.09.2020 - 31.07.2021

(intern)

stud. Mitarbeiter/in

01.10.2021 - 31.05.2022

Zuordnung

Organisationseinheit

Fakultät für Technische Wissenschaften

Kategorisierung

Projekttyp	Forschungsförderung (auf Antrag oder Ausschreibung)
Förderungstyp	§26
Forschungstyp	Grundlagenforschung
Sachgebiete	102020 - Medizinische Informatik (305905)
Forschungscluster	Kein Forschungscluster ausgewählt
Genderrelevanz	Genderrelevanz nicht ausgewählt
Projektfokus	Science to Science (Qualitätsindikator: I) Klassifikationsraster der zugeordneten Organisationseinheiten: Institut für Informationstechnologie
Arbeitsgruppen	Distributed Multimedia Systems

Finanzierung

Förderprogramm

Kooperationen

Organisation

Adresse

Feschnigstraße 11
AT - 9020 Klagenfurt

Forschungsaktivitäten

Hier werden alle mit diesem Projekt in Zusammenhang stehenden Forschungsaktivitäten angezeigt. Mit dem untenstehenden Link können sie sich diese Forschungsaktivitäten in der Suche anzeigen lassen und gegebenenfalls exportieren.

(Achtung: Externe Aktivitäten werden im Suchergebnis nicht mitangezeigt)

Zugehörige Forschungsaktivitäten in der Suche anzeigen

Projekte	Keine verknüpften Projekte vorhanden
Publikationen	Eye Movement-Based Analysis on Methodologies and Efficiency in the Process of Image Noise Evaluation Eye Movement-Based Analysis on Methodologies and Efficiency in the Process of Image Noise Evaluation (2019) C. Peng, Q. Xu, Y. Guo, K. Schöffmann Proceedings of the 28th International Conference on Artificial Neural Networks Kein Verlag ausgewählt zur Publikation Deblurring Cataract Surgery Videos Using a Multi-Scale Deconvolutional Neural Network Deblurring Cataract Surgery Videos Using a Multi-Scale Deconvolutional Neural Network (2020) N. Ghamsarian, K. Schöffmann, M. Taschwer Proceedings of the IEEE 17th International Symposium on Biomedical Imaging (ISBI 2020) Kein Verlag ausgewählt zur Publikation ECAT - Endoscopic Concept Annotation Tool ECAT - Endoscopic Concept Annotation Tool (2018) B. Münzer, A. Leibetseder, S. Kletz, K. Schöffmann Proceedings of the 25th International Conference on Multimedia Modeling 2019 (MMM2019) Kein Verlag ausgewählt zur Publikation lifeXplore at the Lifelog Search Challenge 2019 lifeXplore at the Lifelog Search Challenge 2019 (2019) A. Leibetseder, B. Münzer, M. Primus, S. Kletz, K. Schöffmann, F. Berns, C. Beecks Proceedings of the ACM Workshop on Lifelog Search Challenge (LSC 19) Kein Verlag ausgewählt zur Publikation Pixel-Based Iris and Pupil Segmentation in Cataract Surgery Videos Using Mask R-CNN Pixel-Based Iris and Pupil Segmentation in Cataract Surgery Videos Using Mask R-CNN (2020) N. Mathá, M. Taschwer, S. Sarny, D. Putzgruber-Adamitsch, K. Schöffmann 2020 IEEE 17th International Symposium on Biomedical Imaging Workshops (ISBI Workshops) Kein Verlag ausgewählt zur Publikation Evaluating the Generalization Performance of Instrument Classification in Cataract Surgery Videos Evaluating the Generalization Performance of Instrument Classification in Cataract Surgery Videos (2019) N. Mathá, K. Schöffmann, M. Taschwer, D. Putzgruber-Adamitsch, Y. El-Shabrawi Proceedings of the 26th International Conference in MultiMedia Modeling (MMM 2020) (Part II) Kein Verlag ausgewählt zur Publikation Dataset Column: Report from the MMM 2019 Special Session on Multimedia Datasets for Repeatable Experimentation (MDRE 2019) Dataset Column: Report from the MMM 2019 Special Session on Multimedia Datasets for Repeatable Experimentation (MDRE 2019) (2019) K. Schöffmann, B. Þór Jónsson, C. Gurrin ACM SIGMM Records Kein Verlag ausgewählt zur Publikation Blind MV-based video steganalysis based on joint inter-frame and intra-frame statistics Blind MV-based video steganalysis based on joint inter-frame and intra-frame statistics (2020) N. Ghamsarian, K. Schöffmann, M. Khademi Multimedia Tools and Applications Kein Verlag ausgewählt zur Publikation LensID: A CNN-RNN-Based Framework Towards Lens Irregularity Detection in Cataract Surgery Videos LensID: A CNN-RNN-Based Framework Towards Lens Irregularity Detection in Cataract Surgery Videos (2021) N. Ghamsarian, M. Taschwer, D. Putzgruber-Adamitsch, S. Sarny, Y. El-Shabrawi, K. Schöffmann MICCAI 21' Proceedings of the 24th International Conference on Medical Image Computing and Computer-Assisted Intervention Kein Verlag ausgewählt zur Publikation V3C1 Dataset: An Evaluation of Content Characteristics V3C1 Dataset: An Evaluation of Content Characteristics (2019) F. Berns, L. Rossetto, K. Schöffmann, C. Beecks, G. Awad ICMR '20: Proceedings of the 2020 International Conference on Multimedia Retrieval Kein Verlag ausgewählt zur Publikation Relevance Detection in Cataract Surgery Videos by Spatio- Temporal Action Localization Relevance Detection in Cataract Surgery Videos by Spatio- Temporal Action Localization (2021) N. Ghamsarian, M. Taschwer, D. Putzgruber-Adamitsch, S. Sarny, K. Schöffmann ICPR 2020 Proceedings of the 25th International Conference on Pattern Recognition (ICPR) Kein Verlag ausgewählt zur Publikation Automatic detection of pupil reactions in cataract surgery videos Automatic detection of pupil reactions in cataract surgery videos (2021) N. Mathá, K. Schöffmann, M. Taschwer, S. Sarny, D. Putzgruber-Adamitsch, Y. El-Shabrawi PLOS ONE Kein Verlag ausgewählt zur Publikation A Test Collection for Interactive Lifelog Retrieval A Test Collection for Interactive Lifelog Retrieval (2018) C. Gurrin, K. Schöffmann, H. Joho, B. Münzer, R. Albatal, F. Hopfgartner, L. Zhou, D. Dang-Nguyen Proceedings of the 25th International Conference on Multimedia Modeling 2019 (MMM2019) Kein Verlag ausgewählt zur Publikation Interactive Video Retrieval in the Age of Deep Learning Interactive Video Retrieval in the Age of Deep Learning (2019) J. Lokoc, K. Schöffmann, W. Bailer, L. Rossetto, C. Gurrin ICMR '20: Proceedings of the 2020 International Conference on Multimedia Retrieval Kein Verlag ausgewählt zur Publikation Autopiloting Feature Maps: The Deep Interactive Video Exploration (diveXplore) System at Video Browser Showdown 2019 Autopiloting Feature Maps: The Deep Interactive Video Exploration (diveXplore) System at Video Browser Showdown 2019 (2018) K. Schöffmann, B. Münzer, A. Leibetseder, M. Primus, S. Kletz Proceedings of the 25th International Conference on Multimedia Modeling 2019 (MMM2019) Kein Verlag ausgewählt zur Publikation The V3C1 Dataset: Advancing the State of the Art in Video Retrieval The V3C1 Dataset: Advancing the State of the Art in Video Retrieval (2019) L. Rossetto, F. Berns, K. Schöffmann, G. Awad, C. Beecks ACM SIGMM Records Kein Verlag ausgewählt zur Publikation lifeXplore at the Lifelog Search Challenge 2023 lifeXplore at the Lifelog Search Challenge 2023 (2023) K. Schöffmann LSC '23 Proceedings of the 6th Annual ACM Lifelog Search Challenge Kein Verlag ausgewählt zur Publikation ReCal-Net: Joint Region-Channel-Wise Calibrated Network for Semantic Segmentation in Cataract Surgery Videos ReCal-Net: Joint Region-Channel-Wise Calibrated Network for Semantic Segmentation in Cataract Surgery Videos (2021) N. Ghamsarian, M. Taschwer, D. Putzgruber-Adamitsch, S. Sarny, Y. El-Shabrawi, K. Schöffmann ICONIP' 21 Proceedings of the 28th International Conference on Neural Information Processing Kein Verlag ausgewählt zur Publikation Enabling Relevance-Based Exploration of Cataract Videos Enabling Relevance-Based Exploration of Cataract Videos (2020) N. Ghamsarian ICMR '20: Proceedings of the 2020 International Conference on Multimedia Retrieval Kein Verlag ausgewählt zur Publikation Pixel-Based Tool Segmentation in Cataract Surgery Videos with Mask R-CNN Pixel-Based Tool Segmentation in Cataract Surgery Videos with Mask R-CNN (2020) M. Fox, M. Taschwer, K. Schöffmann Proceedings of the 2020 IEEE 33rd International Symposium on Computer-Based Medical Systems (CBMS) Kein Verlag ausgewählt zur Publikation Relevance-Based Compression of Cataract Surgery Videos Using Convolutional Neural Networks Relevance-Based Compression of Cataract Surgery Videos Using Convolutional Neural Networks (2020) N. Ghamsarian, H. Amirpourazarian, C. Timmerer, M. Taschwer, K. Schöffmann Proceedings of the 28th ACM International Conference on Multimedia (MM '20) Kein Verlag ausgewählt zur Publikation lifeXplore at the Lifelog Search Challenge 2021 lifeXplore at the Lifelog Search Challenge 2021 (2021) A. Leibetseder, K. Schöffmann LSC'21 Proceedings of the 4th Annual on Lifelog Search Challenge Kein Verlag ausgewählt zur Publikation DeepPyramid: Enabling Pyramid View and Deformable Pyramid Reception for Semantic Segmentation in Cataract Surgery Videos DeepPyramid: Enabling Pyramid View and Deformable Pyramid Reception for Semantic Segmentation in Cataract Surgery Videos (2022) N. Ghamsarian, M. Taschwer, R. Sznitman, K. Schöffmann MICCAI'22 Proceedings of the International Conference on Medical Image Computing and Computer-Assisted Intervention Kein Verlag ausgewählt zur Publikation lifeXplore at the Lifelog Search Challenge 2022 lifeXplore at the Lifelog Search Challenge 2022 (2022) A. Leibetseder, D. Stefanics, K. Schöffmann LSC '22: Proceedings of the 5th Annual on Lifelog Search Challenge Kein Verlag ausgewählt zur Publikation Eye movement based information system indicates human behavior in virtual driving Eye movement based information system indicates human behavior in virtual driving (2022) Z. Peng, Q. Xu, R. Zhang, K. Schöffmann, S. Parkinson bioRxiv Cold Spring Harbor Laboratory zur Publikation
Veranstaltungen	Keine verknüpften Veranstaltung vorhanden
Vorträge	Processing Cataract Surgery Videos with Deep Learning Processing Cataract Surgery Videos with Deep Learning K. Schöffmann Dublin , Irland seit 25.10.2022 Zum Vortrag Relevant Content Detection in Cataract Surgery Videos Relevant Content Detection in Cataract Surgery Videos K. Schöffmann seit 19.04.2022 Zum Vortrag lifeXplore at the Lifelog Search Challenge 2022 lifeXplore at the Lifelog Search Challenge 2022 A. Leibetseder, D. Stefanics, K. Schöffmann seit 27.06.2022 Zum Vortrag lifeXplore at the Lifelog Search Challenge 2023 lifeXplore at the Lifelog Search Challenge 2023 K. Schöffmann seit 12.06.2023 Zum Vortrag ReCal-Net: Joint Region-Channel-Wise Calibrated Network for Semantic Segmentation in Cataract Surgery Videos ReCal-Net: Joint Region-Channel-Wise Calibrated Network for Semantic Segmentation in Cataract Surgery Videos N. Ghamsarian, M. Taschwer, D. Putzgruber-Adamitsch, S. Sarny, Y. El-Shabrawi, K. Schöffmann seit 11.12.2021 Zum Vortrag LensID: A CNN-RNN-Based Framework Towards Lens Irregularity Detection in Cataract Surgery Videos LensID: A CNN-RNN-Based Framework Towards Lens Irregularity Detection in Cataract Surgery Videos N. Ghamsarian, M. Taschwer, D. Putzgruber-Adamitsch, S. Sarny, Y. El-Shabrawi, K. Schöffmann seit 28.09.2021 Zum Vortrag Relevance Detection in Cataract Surgery Videos by Spatio- Temporal Action Localization Relevance Detection in Cataract Surgery Videos by Spatio- Temporal Action Localization N. Ghamsarian, M. Taschwer, D. Putzgruber-Adamitsch, S. Sarny, K. Schöffmann seit 14.01.2021 Zum Vortrag Pixel-Based Iris and Pupil Segmentation in Cataract Surgery Videos Using Mask R-CNN Pixel-Based Iris and Pupil Segmentation in Cataract Surgery Videos Using Mask R-CNN N. Mathá, M. Taschwer, S. Sarny, D. Putzgruber-Adamitsch, K. Schöffmann seit 06.04.2020 Zum Vortrag Deblurring Cataract Surgery Videos Using a Multi-Scale Deconvolutional Neural Network Deblurring Cataract Surgery Videos Using a Multi-Scale Deconvolutional Neural Network N. Ghamsarian, K. Schöffmann, M. Taschwer seit 04.04.2020 Zum Vortrag Relevance-Based Compression of Cataract Surgery Videos Using Convolutional Neural Networks Relevance-Based Compression of Cataract Surgery Videos Using Convolutional Neural Networks N. Ghamsarian, H. Amirpourazarian, C. Timmerer, M. Taschwer, K. Schöffmann seit 15.10.2020 Zum Vortrag Enabling Relevance-Based Exploration of Cataract Videos Enabling Relevance-Based Exploration of Cataract Videos N. Ghamsarian seit 29.10.2020 Zum Vortrag Pixel-Based Tool Segmentation in Cataract Surgery Videos with Mask R-CNN Pixel-Based Tool Segmentation in Cataract Surgery Videos with Mask R-CNN M. Fox, M. Taschwer, K. Schöffmann seit 29.07.2020 Zum Vortrag Evaluating the Generalization Performance of Instrument Classification in Cataract Surgery Videos Evaluating the Generalization Performance of Instrument Classification in Cataract Surgery Videos N. Mathá, K. Schöffmann, M. Taschwer, D. Putzgruber-Adamitsch, Y. El-Shabrawi seit 08.01.2020 Zum Vortrag