Surveiller la dérive des données en production
Le modèle de scoring de crédit est en production depuis 8 mois. Le rapport mensuel de surveillance est dans ~/monitoring/rapport-septembre.md (indice de stabilité de population PSI par variable, performance mesurée sur les dossiers dont l'issue est connue).
Règle interne : PSI < 0,10 stable ; 0,10 à 0,25 à surveiller ; > 0,25 dérive significative.
- Variable en dérive significative →
answer variable <nom>; variable « à surveiller » →answer surveiller <nom> - La performance (AUC) est passée de 0,81 à 0,74. Décision →
answer decision <reentrainer|ignorer|supprimer> - Écrivez
~/monitoring/plan.md:## Constat,## Cause probable,## Actions(réentraînement sur données récentes, validation avant mise en production, alerte automatique sur le PSI) - Pourquoi la performance réelle n'est-elle connue qu'avec retard ? →
answer retard <etiquettes|calcul|stockage>
Contenu Premium+
Ce contenu est inclus dans l'offre Premium+. Le titre et le résumé restent visibles pour vous aider à choisir.
Tâches
- Lecture du PSI
- Décision et délai
- Plan d'action