+190 XP

L'operating model et la plateforme IA

En 2019, une grande banque européenne comptait 160 modèles de machine learning répartis entre ses business units. Quand une nouvelle réglementation les a obligés à auditer chaque modèle touchant aux décisions de crédit, l'équipe du CDO a eu besoin de six semaines juste pour les *localiser*. Onze tournaient en production sur le compte cloud personnel d'un data scientist. Trois avaient été mis hors service par des gens partis depuis. Deux équipes différentes avaient construit indépendamment le même modèle de churn sur les mêmes données, avec des conclusions divergentes que deux dirigeants différents citaient dans la même réunion.

Voilà à quoi ressemble l'AI sprawl à grande échelle, et c'est le résultat par défaut. Chaque POC réussi crée un nouvel orphelin : un modèle sans propriétaire, sans monitoring, sans calendrier de réentraînement et sans rattachement à une plateforme. La question qui sépare les CDO qui scalent l'IA de ceux qui accumulent de la dette technique n'est pas « comment construire plus de modèles ? ». C'est « quel operating model rend le 50e modèle moins coûteux à construire et plus sûr à exploiter que le cinquième ? »

C'est un problème de design organisationnel et architectural, et c'est à vous de le résoudre.

Le spectre des operating models : centralisé, embedded, et la réponse hub-and-spoke

Tout operating model IA se situe quelque part sur un spectre défini par le rattachement des talents et le lieu de décision. Les deux extrêmes échouent de façon prévisible.

Entièrement centralisé (un Center of Excellence qui détient tous les data scientists) apporte cohérence, réutilisabilité et gouvernance, mais meurt de faim côté contexte métier. L'équipe centrale devient un goulot d'étranglement, classe les travaux selon ses propres priorités et livre des modèles que le métier ignore discrètement parce que personne dans le P&L n'a contribué à les façonner. Vous obtenez des solutions techniquement excellentes à des problèmes que personne n'a en urgence.

Entièrement embedded (data scientists rattachés aux business units) apporte pertinence et vitesse, mais reproduit le chaos de la banque européenne. Chaque unité réinvente ses pipelines de features, choisit ses outils, fixe sa tolérance au risque et ne construit aucun actif partagé. Vous obtenez 160 modèles et aucun effet de levier.

La réponse durable est le hub-and-spoke, mais l'expression est employée si vaguement qu'elle masque les vraies décisions de design. La distinction qui compte est *ce que détient le hub versus ce que détiennent les spokes*, et bien placer cette frontière représente 80 % du travail.

Une règle utile : le hub détient le comment ; les spokes détiennent le quoi.

Le hub (votre organisation centrale de plateforme IA) détient la paved road, la plateforme, les composants réutilisables, l'outillage MLOps, le framework de gouvernance des modèles, les standards de monitoring et de documentation, et un petit vivier de talents spécialisés (ML engineering, responsible AI, SRE plateforme). Les spokes (squads embedded dans les domaines métier) détiennent la sélection des cas d'usage, le feature engineering métier, le développement des modèles contre des métriques business, et la responsabilité P&L des résultats.

Le mode d'échec de la plupart des CDO est de tracer cette ligne par *rôle* (« tous les data scientists me sont rattachés ») au lieu de la tracer par *responsabilité*. Tracez-la par responsabilité et les lignes de reporting suivent naturellement : les ingénieurs plateforme et ML sont rattachés au hub ; les data scientists applicatifs siègent dans les spokes avec un rattachement en pointillé au hub pour les standards et le développement de carrière.

Le test de fédération

Avant de vous engager sur une structure, faites passer à votre état actuel le test de fédération. Notez votre organisation sur trois axes :

  • Densité de cas d'usage par domaine. Si seulement deux ou trois domaines ont une demande IA réelle et récurrente, un modèle centralisé fonctionne et l'embedding complet est prématuré : vous ne pouvez pas staffer des squads qui resteraient inoccupées.
  • Variance de maturité data. Si les domaines diffèrent énormément en data readiness, une plateforme centrale forte n'est pas négociable ; sinon les domaines matures fileront devant et les retardataires construiront des stacks parallèles.
  • Exposition réglementaire. Une forte exposition tire résolument vers un contrôle central du cycle de vie des modèles, parce qu'il vous faut un seul système de référence auditable pour chaque modèle.

Un retailer dont la demande est concentrée sur le merchandising et la supply chain ne devrait pas construire une fédération tentaculaire ; deux squads embedded plus une équipe plateforme légère, c'est la bonne réponse. Une banque mondiale avec de la demande IA dans chaque fonction et une réglementation lourde a besoin d'un hub fort avec des standards formels. Adaptez le modèle au diagnostic, pas à la mode organisationnelle du moment.

La plateforme : ce que « réutilisable » veut vraiment dire

Les CDO disent « nous construisons une plateforme IA » et cela désigne tout et n'importe quoi, d'une licence Databricks à un comité de gouvernance. Soyez précis. Une plateforme IA de production est un ensemble de services partagés qui transforment des constructions de modèles unitaires en production à la chaîne. Le test d'une vraie plateforme est simple : le coût marginal et le délai de déploiement du modèle N+1 baissent quand N augmente. Si chaque nouveau modèle coûte autant que le précédent, vous avez une boîte à outils, pas une plateforme.

Quatre couches de plateforme produisent cette baisse du coût marginal.

1. La couche features. Le composant réutilisable au plus fort effet de levier est le feature store. Quand votre équipe fraude et votre équipe crédit ont toutes deux besoin de « vélocité transactionnelle client sur 30 jours », elles devraient consommer la même feature gouvernée, monitorée et versionnée, pas la construire deux fois avec de subtiles différences. Le feature store est là où le problème de doublon de modèle de churn de la banque européenne se règle à la racine : une définition, un propriétaire, plusieurs consommateurs.

2. La couche pipeline et entraînement. Des pipelines d'entraînement standardisés et templatisés pour qu'un nouveau projet démarre d'un squelette fonctionnel, pas d'un notebook vierge. C'est là que vous encodez la « paved road » : un projet généré depuis le template obtient automatiquement le suivi des expérimentations, la capture du lineage et une entrée dans le model registry.

3. La couche déploiement et serving. Des patterns communs pour le serving batch et temps réel afin qu'un data scientist ne négocie pas l'infrastructure à chaque lancement. Le déploiement en self-service derrière des guardrails est l'objectif.

4. La couche monitoring et gouvernance. Détection automatisée de drift, monitoring de performance, et le model registry qui aurait répondu à la question de l'audit en six minutes, pas six semaines.

Le registry est le tissu conjonctif. Une entrée minimale de registry rend l'operating model applicable parce que *rien n'atteint la production sans elle* :

yaml
model:
  name: credit_churn_v3
  owner_squad: retail-lending
  business_metric: 90d_retention_uplift
  training_data: feature_store/customer_txn_velocity@v4
  approval: risk_committee_2024_03
  monitoring:
    drift_check: daily
    performance_review: weekly
    retrain_trigger: auc < 0.72

Ce n'est pas de la bureaucratie ; c'est le contrat lisible par machine entre le spoke qui détient le modèle et le hub qui détient la plateforme. C'est aussi votre piste d'audit, votre kill switch et votre catalogue de réutilisation dans un seul artefact.

Machine Learning Design Patterns for MLOps at Scale

Watch on YouTube

La décision build-buy-partner pour les composants de plateforme

Vous ne construirez pas les quatre couches vous-même, et vous ne devriez pas. Appliquez un filtre net : achetez la plomberie, construisez la paved road, partenariez sur la frontière.

Achetez l'infrastructure commodité, serving, orchestration, suivi d'expérimentations, là où des fournisseurs matures existent et où vos besoins n'ont rien de particulier. Construisez la fine couche de templates opinionés, de standards et d'intégrations qui encode la gouvernance et le modèle de données de *votre* organisation, parce que c'est là votre véritable source de levier et qu'aucun fournisseur ne le fera pour vous. Partenariez (ou utilisez des services managés de frontière) pour les capacités qui évoluent trop vite pour être détenues, notamment les grands modèles de fondation, où construire le vôtre est une façon d'être durablement en retard.

L'erreur est d'inverser tout cela : les équipes construisent amoureusement un feature store sur mesure (la plomberie) puis achètent un produit de gouvernance générique qui ne colle pas à leur cycle de vie des modèles (la paved road). Vous finissez par maintenir une infrastructure qui n'apporte aucune différenciation pendant que vos standards restent inappliqués.

Vérification des acquis

1. Selon la leçon, quelle est la question centrale qui distingue les CDO qui scalent l'IA avec succès de ceux qui accumulent de la dette technique ?

2. La leçon décrit l'« AI sprawl » comme le « résultat par défaut ». Que cela signifie-t-il conceptuellement ?

3. Dans le modèle hub-and-spoke, la leçon propose la règle « le hub détient le comment ; les spokes détiennent le quoi ». Qu'est-ce que cette distinction établit principalement ?

CHOIX MULTIPLES

4. Sélectionnez TOUTES les faiblesses que la leçon attribue à un operating model ENTIÈREMENT CENTRALISÉ (un Center of Excellence détenant tous les data scientists).

Sélectionnez toutes les réponses correctes.

CHOIX MULTIPLES

5. Sélectionnez TOUTES les affirmations qui décrivent correctement les arbitrages d'un operating model ENTIÈREMENT EMBEDDED (data scientists rattachés aux business units).

Sélectionnez toutes les réponses correctes.

Financement, talents et rythme opérationnel produit

L'organigramme et la plateforme sont nécessaires mais pas suffisants. Deux choix de design déterminent si l'operating model fonctionne réellement lundi matin : comment vous le financez, et comment vous le pilotez.

Financez la plateforme comme un produit, pas comme un projet. La façon la plus courante de tuer une plateforme IA naissante est de la financer comme un projet d'investissement lié à un cas d'usage spécifique. Le cas d'usage est livré, le financement s'arrête, la plateforme se dégrade, et l'équipe suivante reconstruit. À la place, financez le hub comme un produit interne permanent avec sa propre roadmap, son propre product manager et ses propres métriques de succès : adoption, time-to-production, taux de réutilisation. Les spokes sont financés par les business units contre des résultats P&L. Cette séparation compte : elle signifie que la plateforme survit à l'achèvement de n'importe quel projet, et que le métier paie pour la valeur pendant que l'entreprise paie pour le levier.

Un mécanisme concret : facturez aux spokes un léger frais de consommation interne pour les services de plateforme (compute, requêtes feature store, serving). Cela fait trois choses simultanément : ça crée de la discipline de coût dans les spokes, ça donne à l'équipe plateforme un signal de demande sur ce qu'il faut construire ensuite, et ça tue la dynamique de « ressource interne gratuite » qui mène au gaspillage. Gardez le frais assez bas pour qu'il ne pousse jamais une équipe vers le shadow IT ; l'objectif est un signal-prix, pas un centre de profit.

Concevez le modèle de talents autour d'une rotation, pas d'un mur. Le rattachement en pointillé au hub échoue s'il n'est qu'une ligne sur l'organigramme. Rendez-le réel par une rotation : les data scientists applicatifs des spokes passent un séjour défini dans l'équipe plateforme au début de leur parcours. Ils apprennent la paved road, ils construisent un composant réutilisable, et ils rapportent ces standards dans le métier. C'est ainsi qu'on propage l'operating model culturellement plutôt que par décret : les standards deviennent « notre façon de travailler » parce que les gens qui travaillent dans les spokes ont contribué à les construire.

Réservez vos talents les plus rares, ML engineers seniors, spécialistes responsible AI, au hub, là où leur levier est le plus élevé sur l'ensemble des cas d'usage. Distribuez les talents applicatifs dans les spokes, où la proximité métier est ce qui les rend efficaces.

Le rythme opérationnel : comment le travail circule vraiment

Le mécanisme qui fait tourner le hub-and-spoke est un processus d'intake et de stage-gate détenu par le hub mais gouverné conjointement. Chaque cas d'usage proposé passe par des portes délibérément légères au début et rigoureuses à la fin :

  1. Intake. Un énoncé de problème d'une page avec un propriétaire métier nommé et une hypothèse de valeur quantifiée. Pas de propriétaire, pas de chiffre de valeur, pas d'entrée. Cette seule porte élimine l'essentiel du sprawl.
  2. Faisabilité. Un spike limité dans le temps (deux à quatre semaines) sur des données réelles de la plateforme. Le résultat est un go/no-go, et surtout, la plupart des POC doivent mourir ici, volontairement. Un taux de conversion POC-vers-production élevé est un signal d'alerte, pas un titre de gloire : cela signifie que vous n'êtes pas assez sélectif à l'intake, ou que vous ne tuez pas les idées faibles assez vite.
  3. Industrialisation. Le modèle entre dans le registry, obtient son contrat de monitoring, passe la revue de gouvernance calibrée sur son niveau de risque, et se déploie via la paved road.
  4. Exploitation. Monitoring en direct, revue planifiée, et plan de retrait. Chaque modèle a un propriétaire et une date d'échéance pour réévaluation.

Le stage gate est là où l'operating model devient visible et applicable. C'est aussi là que le jugement du CDO a le plus de valeur : votre travail aux portes n'est pas d'approuver tout ce qui est techniquement solide, mais de protéger la plateforme et le portefeuille des travaux à faible valeur qui s'accumuleront en dette de maintenance. Dire non à un modèle plausible mais marginal est l'une des décisions au plus fort rendement que vous prenez, parce que chaque modèle déployé est un passif que vous portez pendant des années.

La banque de notre introduction s'est reconstruite exactement autour de cela. En dix-huit mois, le délai de déploiement des modèles est passé de mois à semaines, chaque modèle en production avait une entrée de registry et un propriétaire nommé, et, contre-intuitivement, le *nombre total* de modèles en production a baissé, parce que la porte d'intake a arrêté le sprawl à la source. Moins de modèles, plus de valeur, beaucoup moins de risque. Voilà ce que produit un operating model qui fonctionne.

Points clés

  • **Tracez la frontière hub-spoke par responsabilité, pas par rôle : le hub détient le *comment* (plateforme, standards, composants réutilisables, MLOps), les spokes détiennent le *quoi* (sélection des cas d'usage, features métier, responsabilité P&L).** Faites le test de fédération, densité de cas d'usage, variance de maturité data, exposition réglementaire, pour calibrer la force que doit avoir le hub.
  • Définissez une plateforme par la baisse du coût marginal : si le modèle N+1 n'est pas moins cher et plus rapide à livrer que le modèle N, vous avez une boîte à outils, pas une plateforme. Priorisez le feature store et le model registry : ils règlent la duplication et l'auditabilité à la racine.
  • Financez la plateforme comme un produit interne permanent avec des métriques d'adoption et de réutilisation, pas comme un projet d'investissement lié à un seul cas d'usage. Utilisez une tarification de consommation interne légère pour créer un signal de demande et de la discipline de coût sans pousser les équipes vers le shadow IT.
  • Faites de la porte d'intake votre principale vanne de contrôle du sprawl : pas de propriétaire métier nommé et d'hypothèse de valeur quantifiée, pas d'entrée. Traitez un taux élevé de POC-vers-production comme un signal d'alerte : tuer tôt les idées faibles est une fonctionnalité de l'operating model, pas un échec.
  • Chaque modèle en production a besoin d'un propriétaire, d'un contrat de monitoring et d'une date d'échéance. Moins de modèles bien gouvernés valent mieux que davantage de modèles orphelins ; votre meilleure décision au stage gate est souvent le modèle que vous refusez de déployer.

À faire, tiré de cette leçon

Ces actions sont compilées dans le plan d'action du rôle.

  • Mettre en place un intake gate exigeant un owner nommé et une valeur quantifiée
  • Attribuez à chaque modèle en production un owner, un contrat de monitoring et une date d'expiration
Voir le plan d'action complet →

Articles liés

Les articles récents du blog qui s'appuient sur cette leçon.