Indicateur de performance clé

Une métrique quantifiable (par exemple, la dérive de précision du modèle, le temps de correction des biais) utilisée pour surveiller et rendre compte des objectifs de gouvernance et de conformité de l'IA.

Définition

Une valeur spécifique et mesurable qui reflète l'efficacité avec laquelle une organisation ou un projet d'IA atteint ses objectifs de gouvernance, tels que la stabilité de la précision globale du modèle dans le temps, le temps moyen nécessaire pour détecter et corriger les problèmes de biais ou le pourcentage de modèles dont les évaluations d'impact sont en cours. Les bons KPI sont liés à des objectifs stratégiques, comportent des seuils clairs et sont suivis via des tableaux de bord automatisés afin de permettre des interventions rapides lorsque les indicateurs s'écartent des limites acceptables.

Exemple concret

Une banque de détail suit le KPI « pourcentage mensuel de dérive du modèle », qui mesure la baisse de la précision prédictive de son modèle de risque de crédit par rapport à son dernier étalonnage. Lorsque la dérive dépasse 3 %, une alerte automatique déclenche un pipeline de reconversion du modèle, garantissant ainsi la fiabilité des décisions de crédit et leur conformité aux normes de précision internes.