Spaces:
Sleeping
Sleeping
File size: 1,032 Bytes
9a76208 |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 |
# Drift Runbook (MLOps)
## A. Data quality (prioritaire)
- verifier categories inconnues (CODE_GENDER, FLAG_OWN_CAR)
- verifier hausse des NaN / champs manquants
- verifier out-of-range numeriques
- verifier le taux de sentinelle DAYS_EMPLOYED
- verifier un changement de pipeline (mapping, imputation, schema)
## B. Prediction drift
- verifier la distribution des scores
- verifier le taux de classe positive
- verifier si le seuil metier a change
## C. Performance (si labels)
- AUC / logloss / Brier
- calibration (Platt/Isotonic)
- analyse par segment (region, canal, produit si dispo)
## Actions
- drift artificiel / bug data: corriger mapping ou schema, redeployer
- prior drift: recalibrer ou ajuster le seuil avec validation metier
- concept drift: retrain recent + validation temporelle + champion/challenger + plan de rollback
## Triggers
- Warning: drift data sans drift score ou perf
- Critical: drift data + drift score (et/ou perf en baisse)
- Retrain: drift persistant sur plusieurs fenetres + impact score/perf
|