+150 XP

Banque · Gouverner les modèles de risque sous surveillance réglementaire

Un examinateur fait glisser une seule question sur la table : « Montrez-moi d'où vient cette variable. » Le nouveau modèle de credit scoring de la banque est prêt à être lancé. L'équipe data science est confiante. Mais si personne ne peut retracer une seule donnée d'entrée jusqu'à son système source, le modèle ne passe pas en production. C'est la réalité de la gouvernance des modèles de risque dans une banque régulée.

Cette leçon vous place dans cette revue de validation. Vous y verrez les règles appliquées par les examinateurs, les contrôles qu'ils exigent, et pourquoi le data lineage est le point de rupture où la plupart des modèles échouent.

Pourquoi les banques gouvernent-elles les modèles

Un modèle en banque, c'est toute méthode quantitative qui transforme des données d'entrée en une décision ou une estimation. Un modèle de credit scoring prédit le risque de défaut. Un modèle de lutte contre le blanchiment (AML) signale les transactions suspectes. Un modèle de stress-testing estime les pertes en cas de récession.

Quand un modèle se trompe, de l'argent réel et des personnes réelles sont affectés. Un modèle de scoring biaisé peut refuser des prêts de façon injuste. Un modèle AML faible peut laisser passer une activité criminelle. Les régulateurs appellent cette exposition le model risk : le risque de perte lié à des décisions prises sur la base de modèles défaillants ou mal utilisés.

Le texte de référence aux États-Unis est SR 11-7, une guidance publiée conjointement par la Federal Reserve et l'Office of the Comptroller of the Currency (OCC) en 2011. Elle reste la norme de référence en 2026. La source primaire est ici : SR 11-7 Guidance on Model Risk Management.

Les trois piliers de SR 11-7

SR 11-7 est court mais exigeant. Il repose sur trois idées.

1. Effective challenge

Quelqu'un d'indépendant des développeurs du modèle doit en faire une revue critique. C'est ce qu'on appelle l'effective challenge. Le relecteur a besoin de la compétence pour comprendre les maths, de l'influence pour imposer des changements, et de l'indépendance pour dire non.

En pratique, une banque met en place une fonction Model Risk Management (MRM) distincte de l'équipe data science. Les développeurs construisent. Le MRM challenge.

2. Validation sur tout le cycle de vie

La validation n'est pas un passage unique. SR 11-7 exige une revue au moment du développement, avant le déploiement, puis en continu. Un modèle de scoring qui fonctionnait en 2024 peut se dégrader à mesure que les comportements clients évoluent. Cette dégradation s'appelle le model drift, et son monitoring est obligatoire.

3. Gouvernance, politique et contrôles

Le conseil d'administration et la direction générale portent le model risk. Il doit exister un model inventory (un registre complet de chaque modèle en usage), des politiques documentées et des rôles clairs. Un examinateur demandera l'inventaire en premier. Un modèle manquant constitue à lui seul une défaillance de gouvernance.

À l'intérieur de la revue de validation

Imaginez la salle. Sont présents le développeur du modèle, un validateur MRM, un responsable data governance, et souvent un compliance officer. Ils déroulent une checklist.

Solidité conceptuelle. Le modèle a-t-il du sens ? Si un modèle de crédit utilise le code postal comme variable, quelqu'un demandera si c'est un proxy de l'origine ethnique, ce qui soulèverait des enjeux de fair lending.

Qualité des données. Les données d'entraînement sont-elles exactes, complètes et représentatives ? Un modèle entraîné uniquement sur des emprunteurs acceptés souffre d'un biais de survie : il n'a jamais vu comment les candidats refusés se seraient comportés.

Analyse des résultats. Le modèle prédit-il réellement ce qu'il prétend prédire ? Les validateurs backtestent les prédictions face aux résultats réels.

Tests d'implémentation. Le code déployé correspond-il au modèle approuvé ? Une formule qui fonctionne dans un notebook peut casser en production.

Data lineage : le contrôle décisif

Retour à la question de l'examinateur : « Montrez-moi d'où vient cette variable. »

Le data lineage est le chemin documenté d'une donnée depuis son origine, à travers chaque transformation, jusqu'à son usage dans le modèle. Voyez-le comme un reçu pour chaque chiffre.

Pourquoi les examinateurs en font une obsession :

  • Si vous ne pouvez pas retracer une variable, vous ne pouvez pas prouver qu'elle est exacte.
  • Vous ne pouvez pas confirmer que vous avez le droit de l'utiliser.
  • Vous ne pouvez pas reproduire le modèle, ce qui casse l'auditabilité.

Un exemple concret. Une feature « ratio dette/revenu » paraît simple. Mais le revenu peut venir d'un système, la dette d'un autre, et le ratio être calculé dans un troisième avec des règles d'arrondi différentes de celles de la source. Chaque saut est un endroit où se cachent les erreurs et les changements de règles.

Les banques modernes suivent le lineage avec des outils de métadonnées et du version control. Voici l'esprit de ce qu'un enregistrement de lineage capture :

yaml
feature: debt_to_income_ratio
source_income: core_banking.customer_income   # vérifié mensuellement
source_debt: credit_bureau.total_obligations  # rafraîchi à chaque extraction
transformation: debt / income
null_handling: exclude_if_income_missing
owner: retail_credit_risk
consent_basis: loan_application_terms
last_validated: 2026-01-15

Notez la ligne consent_basis. C'est là que lineage et privacy se rejoignent.

Les règles de privacy qui contraignent les données

Un modèle ne peut utiliser que les données que la banque a légalement le droit d'utiliser à cette fin.

Aux États-Unis, le Fair Credit Reporting Act (FCRA) encadre l'usage des données de crédit et exige que les consommateurs puissent connaître le motif d'un refus. C'est pourquoi les prêteurs doivent produire des adverse action reasons : les facteurs précis derrière un refus. Un modèle incapable d'expliquer ses principaux motifs enfreint la loi, quelle que soit sa précision.

Les lois de fair lending (l'Equal Credit Opportunity Act) interdisent la discrimination sur des caractéristiques protégées. Même si un modèle ne voit jamais l'origine ethnique, une variable corrélée peut produire un disparate impact, un résultat qui pénalise un groupe protégé. Les validateurs font tourner des tests d'équité pour le détecter.

Dans l'UE et au Royaume-Uni, le General Data Protection Regulation (GDPR) ajoute la limitation de finalité (des données collectées pour une raison ne peuvent pas être réutilisées librement), le droit à l'explication pour les décisions automatisées, et des règles de consentement strictes.

Ce qu'il faut en retenir : la privacy n'est pas une considération juridique ajoutée à la fin. C'est une contrainte de conception qui détermine quelles features un modèle peut même contenir.

🎬 [VIDEO: "Model Risk Management Explained" - youtube.com - un aperçu clair des principes de SR 11-7 et de la façon dont les banques valident leurs modèles avant déploiement]

Explicabilité et problème de la boîte noire

Les examinateurs sont prudents face aux modèles de machine learning complexes, car ils peuvent être difficiles à interpréter. Une simple régression logistique (un modèle statistique qui pondère chaque entrée) montre exactement comment chaque variable influence le score. Un réseau de neurones profond, non.

Cela n'interdit pas les modèles complexes. Cela relève le niveau d'exigence documentaire. Les banques utilisent des outils comme les SHAP values (une méthode qui attribue une prédiction à chaque entrée) pour expliquer les décisions individuelles. Si un client est refusé, la banque doit tout de même générer des adverse action reasons honnêtes.

La règle empirique dans la salle : si vous ne pouvez pas l'expliquer, vous ne pouvez pas le déployer dans une décision régulée.

Vérification des acquis

1. Dans le contexte de SR 11-7, quelle est la meilleure définition du « model risk » ?

2. Pourquoi l'« effective challenge » exige-t-il que le relecteur soit indépendant, en plus d'être compétent ?

3. Une banque sépare sa fonction Model Risk Management (MRM) de l'équipe data science. Quel est l'objectif premier de cette séparation organisationnelle ?

CHOIX MULTIPLES

4. Sélectionnez TOUTES les bonnes réponses. Lesquels des éléments suivants seraient considérés comme un « modèle » selon la définition bancaire donnée dans la leçon ?

Sélectionnez toutes les réponses correctes.

CHOIX MULTIPLES

5. Sélectionnez TOUTES les bonnes réponses. Pourquoi le data lineage est-il décrit comme le point de rupture où la plupart des modèles échouent à la validation ?

Sélectionnez toutes les réponses correctes.

Le monitoring continu après le lancement

L'approbation n'est pas la ligne d'arrivée. Une fois le modèle en production, le MRM met en place un monitoring continu.

Le monitoring de performance surveille la précision dans le temps. Si la qualité de prédiction du défaut se dégrade, le modèle peut nécessiter un recalibrage.

La stabilité de population vérifie si les candidats entrants ressemblent encore à la population d'entraînement. Une métrique courante est le Population Stability Index (PSI), qui alerte quand la distribution des entrées a suffisamment dérivé pour poser problème.

Le suivi des overrides enregistre la fréquence à laquelle des humains passent outre le modèle. Des overrides fréquents suggèrent que le modèle n'est pas digne de confiance ou pas adapté à son usage.

Quand un modèle franchit ses seuils, la politique de gouvernance impose une escalade : recalibrer, revalider ou retirer.

Ce que les examinateurs veulent vraiment voir

Ramené à l'essentiel, une banque doit démontrer :

  • Un model inventory complet avec des propriétaires.
  • Une validation indépendante avec un véritable effective challenge.
  • Un data lineage de bout en bout pour chaque entrée du modèle.
  • Une conformité privacy et fair lending documentée.
  • Une explicabilité suffisante pour justifier chaque décision.
  • Un monitoring continu avec des déclencheurs d'escalade définis.

S'il en manque un, le déploiement attend. C'est pourquoi l'équipe data science de notre scène d'ouverture ne pouvait pas lancer sur la seule base de sa confiance.

Points clés

  • Le model risk se gouverne, il ne se présume pas. SR 11-7 exige un effective challenge indépendant, une validation sur tout le cycle de vie et une responsabilité au niveau du conseil via un model inventory.
  • Le data lineage est le contrôle qui casse en premier. Si vous ne pouvez pas retracer une variable jusqu'à sa source et prouver comment elle a été transformée, le modèle ne se déploie pas.
  • La privacy est une contrainte de conception. Le FCRA, les règles de fair lending et le GDPR limitent les données qu'un modèle peut utiliser et imposent des adverse action reasons honnêtes ainsi que des tests d'équité.
  • Dans les décisions régulées, l'explicabilité l'emporte sur la précision brute. Un modèle que vous ne pouvez pas expliquer ne peut pas être déployé, aussi bien prédise-t-il.
  • La validation continue après le lancement. Surveillez le drift avec des métriques comme le PSI, suivez les overrides et escaladez quand les seuils sont franchis.