I dette webinaret presenterer Pål Furu Kamsvåg forskning fra sitt doktorgradsprosjekt om evaluering av KI-systemer i domenespesifikke sammenhenger. Han ser nærmere på utfordringene ved å bruke standardiserte tester som mål på faktisk ytelse, og på hva som kan gå tapt når komplekse egenskaper ved KI reduseres til tall og poengsummer.
Helse og medisin er særlig interessante områder, fordi feil kan få store konsekvenser. Kamsvåg bruker blant annet eksempler fra KI-genererte sammendrag av pasientkonsultasjoner og KI-støttet tolkning av medisinske bilder i radiologi. Hvordan vurderer vi om et journalsammendrag er relevant, presist og nyttig? Og hvordan evaluerer vi en modell som skal oppdage eller vurdere funn i røntgen-, CT- eller MR-bilder?
Webinaret ser også på mulige veier videre, blant annet kombinasjonen av standardiserte benchmarks med menneskelig evaluering og kvalitative metoder.
Presentasjon ved Pål Furu Kamsvåg, Dr.gradsstipendiat, NTNU Institutt for datateknologi og informatikk (IDI), og forsker, SINTEF Digital.
Podden och tillhörande omslagsbild på den här sidan tillhör
ehealthresearch. Innehållet i podden är skapat av ehealthresearch och inte av,
eller tillsammans med, Poddtoppen.
