Publikation: Learning metric volume estimation of fr...
Stammdaten
Titel: | Learning metric volume estimation of fruits and vegetables from short monocular video sequences |
Untertitel: | |
Kurzfassung: | We present a novel approach for extracting metric volume information of fruits and vegetables from short monocular video sequences and associated inertial data recorded with a hand-held smartphone. Estimated segmentation masks from a pre-trained object detector are fused with the predicted change in relative pose obtained from the inertial data to predict the class and volume of the objects of interest. Our approach works with simple RGB video frames and inertial data which are readily available from modern smartphones. It does not require reference objects of known size in the video frames. Using a balanced validation dataset, we achieve a classification accuracy of 95% and a mean absolute percentage error for the volume prediction of 16% on untrained objects, which is comparable to state-of-the-art results requiring more elaborated data recording setups. A very accurate estimation of the model uncertainty is achieved through ensembling and the use of Gaussian negative log-likelihood loss. The dataset used in our experiments including ground-truth volume information is available at https://sst.aau.at/cns/datasets. |
Schlagworte: | Deep learning; Computer vision; Image Recognition |
Publikationstyp: | Beitrag in Zeitschrift (Autorenschaft) |
Erscheinungsdatum: | 21.03.2023 (Online) |
Erschienen in: |
Heliyon
Heliyon
(
Cell Press;
)
zur Publikation |
Titel der Serie: | - |
Bandnummer: | 9 |
Heftnummer: | 4 |
Erstveröffentlichung: | Ja |
Version: | - |
Seite: | S. e14722 - e14722 |
Versionen
Keine Version vorhanden |
Erscheinungsdatum: | 21.03.2023 |
ISBN (e-book): | - |
eISSN: | - |
DOI: | http://dx.doi.org/10.1016/j.heliyon.2023.e14722 |
Homepage: | - |
Open Access |
|
AutorInnen
Jan Steinbrener (intern) |
Vesna Dimitrievska (extern) |
Federico Pittino (extern) |
Frans Starmans (extern) |
Roland Waldner (extern) |
Jürgen Holzbauer (extern) |
Thomas Arnold (extern) |
Zuordnung
Organisation | Adresse | ||||
---|---|---|---|---|---|
Fakultät für Technische Wissenschaften
Institut für Intelligente Systemtechnologien
|
AT - 9020 Klagenfurt am Wörthersee |
Kategorisierung
Sachgebiete | |
Forschungscluster |
|
Zitationsindex |
Informationen zum Zitationsindex: Master Journal List
|
Peer Reviewed |
|
Publikationsfokus |
Klassifikationsraster der zugeordneten Organisationseinheiten:
|
Arbeitsgruppen |
|
Kooperationen
Organisation | Adresse | ||
---|---|---|---|
Silicon Austria Labs GmbH
|
AT - 9524 Villach |
||
Philips Domestic Appliances Austria GmbH
|
AT - 9020 Klagenfurt am Wörthersee |
Forschungsaktivitäten
(Achtung: Externe Aktivitäten werden im Suchergebnis nicht mitangezeigt)
Projekte: | Keine verknüpften Projekte vorhanden |
Publikationen: | Keine verknüpften Publikationen vorhanden |
Veranstaltungen: | Keine verknüpften Veranstaltung vorhanden |
Vorträge: | Keine verknüpften Vorträge vorhanden |