Les deux comptent, dans cet ordre : la métrique métier décide si le projet vaut d’exister ; la métrique technique décide si le modèle fait son travail sur le chemin de cette valeur.
La métrique technique mesure l’écart entre prédiction et étiquette : un score, une erreur, un taux de bons classements. Elle est indispensable pour comparer deux versions, pour savoir si un entraînement a abouti, pour alerter si le service déraille.
La métrique métier mesure ce que l’organisation voulait : euros récupérés, minutes gagnées, incidents évités, appels inutiles en moins. Elle se lit après qu’une décision a été prise grâce au modèle, pas dans le carnet d’expérimentation.
Un modèle peut gagner trois points techniques et ne rien changer au compte d’exploitation. Un autre peut stagner techniquement et, mieux calé dans le process, faire baisser le coût d’une file d’attente. Sans la seconde lecture, la première est un sport.
Que vous refusez de piloter un projet uniquement au score d’école. La réponse faible énumère des noms de métriques. La réponse solide pose le lien :
Si le score technique monte et que personne ne décide autrement, le métier n’a pas bougé.
Vous donnez un exemple concret. Un score de risque plus fin qui n’est jamais lu par les analystes. Un classement plus juste dont on n’appelle que les vingt premiers par habitude. Une erreur plus basse sur un montant que personne n’utilise pour ajuster un stock.
Vous dites aussi le contraire, pour ne pas sembler naïf : sans métrique technique, vous naviguez à l’aveugle pendant l’entraînement. Vous en choisissez une alignée — celle dont l’amélioration a une chance de bouger le métier — et vous gardez la métrique métier pour les revues et les essais en conditions réelles.
« Les deux disent la même chose, non ? »
Pas toujours. La technique évalue une prédiction. Le métier évalue une politique : seuil, capacité humaine, délai, exceptions. Entre les deux, il y a le process. C’est souvent lui qui mange le gain.
« On n’a pas de métrique métier propre. »
Alors le cadrage n’est pas fini. Vous en proposez une, même imparfaite : un proxy d’action (taux de dossiers traités à temps), un montant, un NPS interne. Mieux vaut un indicateur discuté qu’un tableau de scores orphelins.
La phrase à retenir : la métrique technique est un instrument de bord ; la métrique métier est la destination.