Administrativ information
| Titel | Modellutvärdering |
| Varaktighet | 60 |
| Modul | A |
| Typ av lektion | Föreläsning |
| Fokus | Tekniska – Grunderna för AI |
| Ämne | Grunderna för AI |
Nyckelord
undermontering, övermontering, generalisering, bias-varians sönderdelning, modellkomplexitet, ROC-kurva,
Lärandemål
- Eleverna förstår begreppet förväntad prediktiv prestanda och generalisering
- Eleverna förstår begreppet modellkomplexitet och dess förhållande till generaliseringsprestanda
- Eleverna är bekanta med bias och varians sitt förhållande till undersittande och översittande
- Eleverna har ett fast grepp om att utvärdera binära klassificeringsmodeller med de mest tillämpade mätvärdena
Förväntad förberedelse
Lärande händelser som ska slutföras innan
Obligatoriskt för studenter
Ingen.
Valfritt för studenter
Referenser och bakgrund för studenter
Ingen.
Rekommenderas för lärare
- Bekanta sig med demonstrationsmaterialen.
Lektionsmaterial
Instruktioner för lärare
Täcka ämnena i lektionens skiss och visa begreppen med hjälp av interaktiva anteckningsböcker (effekt av hyperparametrarna på under/översittande och bias/varianskurvor; förkalkning av ROC/PR-kurvorna).
Skiss/tidsschema
| Längd (min) | Beskrivning | Begrepp |
|---|---|---|
| 5 | Icke-linjär regression (recap) | baspunkter, RBF, kärnparametrar, medelkvadratfel |
| 10 | Modellens komplexitet, regulariztaion och antalet parametrar | komplexitet, reglering |
| 10 | Bias-varians sönderdelning av medelkvadratfel | generaliseringsfel, bias, varians, observationsbrus, undermontering, övermontering |
| 10 | Påvisande av effekterna av komplexitetsparametern, regleringskoefficient och antal baspunkter på kurvmontering och bias/varians |
|
| 15 | Utvärdering av klassificeringsmodeller | förvirringsmatris, TPR, FPR, precision, beslutsgräns, ROC/PR-kurva |
| 10 | Demonstration av beslutsgränser och ROC-kurva |
Erkännanden
Masterprogrammet Human-Centered AI har samfinansierats av Fonden för ett sammanlänkat Europa i Europeiska unionen inom ramen för Grant CEF-TC-2020–1 Digital Skills 2020 EU-IA-0068.