onr:"swepub:oai:DiVA.org:mdh-64446"
Sökning: onr:"swepub:oai:DiVA.org:mdh-64446" > Evaluating the Robu...
- 1 av 1
- Föregående post
- Nästa post
- Till träfflistan
- Lindén, JoakimMälardalens universitet,Inbyggda system,Mälardalen University, Västerås, Sweden; Saab AB, Linköping, Sweden (författare)
Evaluating the Robustness of ML Models to Out-of-Distribution Data Through Similarity Analysis
- Artikel/kapitelEngelska2023
Förlag, utgivningsår, omfång ...
- Springer Science and Business Media Deutschland GmbH,2023
- printrdacarrier
Nummerbeteckningar
- LIBRIS-ID:oai:DiVA.org:mdh-64446
- https://urn.kb.se/resolve?urn=urn:nbn:se:mdh:diva-64446URI
- https://doi.org/10.1007/978-3-031-42941-5_30DOI
- https://urn.kb.se/resolve?urn=urn:nbn:se:kth:diva-337818URI
Kompletterande språkuppgifter
- Språk:engelska
- Sammanfattning på:engelska
Ingår i deldatabas
- SwePubSwePub
Klassifikation
Anmärkningar
- Part of ISBN 9783031429408QC 20231009
- In Machine Learning systems, several factors impact the performance of a trained model. The most important ones include model architecture, the amount of training time, the dataset size and diversity. We present a method for analyzing datasets from a use-case scenario perspective, detecting and quantifying out-of-distribution (OOD) data on dataset level. Our main contribution is the novel use of similarity metrics for the evaluation of the robustness of a model by introducing relative Fréchet Inception Distance (FID) and relative Kernel Inception Distance (KID) measures. These relative measures are relative to a baseline in-distribution dataset and are used to estimate how the model will perform on OOD data (i.e. estimate the model accuracy drop). We find a correlation between our proposed relative FID/relative KID measure and the drop in Average Precision (AP) accuracy on unseen data.
Ämnesord och genrebeteckningar
- NATURVETENSKAP Data- och informationsvetenskap hsv//swe
- NATURAL SCIENCES Computer and Information Sciences hsv//eng
- NATURVETENSKAP Data- och informationsvetenskap Datavetenskap hsv//swe
- NATURAL SCIENCES Computer and Information Sciences Computer Sciences hsv//eng
- NATURVETENSKAP Data- och informationsvetenskap Datorseende och robotik hsv//swe
- NATURAL SCIENCES Computer and Information Sciences Computer Vision and Robotics hsv//eng
- NATURVETENSKAP Data- och informationsvetenskap Bioinformatik hsv//swe
- NATURAL SCIENCES Computer and Information Sciences Bioinformatics hsv//eng
- accuracy estimation
- datasets
- neural networks
- similarity metrics
- Learning systems
- Dataset
- Distance measure
- Frechet
- Machine learning systems
- Modeling architecture
- Neural-networks
- Performance
- Similarity analysis
- Drops
Biuppslag (personer, institutioner, konferenser, titlar ...)
- Forsberg, HåkanMälardalens universitet,Inbyggda system,Mälardalen University, Västerås, Sweden(Swepub:mdh)hfg04 (författare)
- Daneshtalab, MasoudMälardalens universitet,Inbyggda system,Mälardalen University, Västerås, Sweden(Swepub:mdh)mdb01 (författare)
- Söderquist, IngemarKTH,Elektronik och inbyggda system,Saab AB, Linköping, Sweden(Swepub:kth)u1w4cndu (författare)
- Mälardalens universitetInbyggda system (creator_code:org_t)
Sammanhörande titlar
- Ingår i:Commun. Comput. Info. Sci.: Springer Science and Business Media Deutschland GmbH, s. 348-359, s. 348-3599783031429408
- Ingår i:New Trends in Database and Information Systems: Springer Science and Business Media Deutschland GmbH, s. 348-359, s. 348-359
Internetlänk
Hitta via bibliotek
- Commun. Comput. Info. Sci. (Sök värdpublikationen i LIBRIS)
Till lärosätets databas
- 1 av 1
- Föregående post
- Nästa post
- Till träfflistan
Hitta mer i SwePub
- Av författaren/redakt...
- Lindén, Joakim
- Forsberg, Håkan
- Daneshtalab, Mas ...
- Söderquist, Inge ...
- Om ämnet
-
- NATURVETENSKAP
- NATURVETENSKAP
- och Data och informa ...
-
- NATURVETENSKAP
- NATURVETENSKAP
- och Data och informa ...
- och Datavetenskap
-
- NATURVETENSKAP
- NATURVETENSKAP
- och Data och informa ...
- och Datorseende och ...
-
- NATURVETENSKAP
- NATURVETENSKAP
- och Data och informa ...
- och Bioinformatik
- Artiklar i publikationen
- Commun. Comput. ...
- New Trends in Da ...
- Av lärosätet
- Mälardalens universitet
- Kungliga Tekniska Högskolan
Sök utanför SwePub
- Sök vidare i:
- Google Book Search
- Google Scholar
Kungliga biblioteket hanterar dina personuppgifter i enlighet med EU:s dataskyddsförordning (2018), GDPR. Läs mer om hur det funkar här.
Så här hanterar KB dina uppgifter vid användning av denna tjänst.
- Copyright © LIBRIS - Nationella bibliotekssystem
- LIBRIS.kb.se
