Hiérarchie des indicateurs
Hiérarchie des indicateurs
La hiérarchie des performances lie l'objectif stratégique de l'entreprise aux décisions quotidiennes des équipes. C'est un « arbre » géré de North Star Metric (NSM) et des totaux d'affaires aux pilotes, aux KPI opérationnels et aux guardrails (restrictions de sécurité). Voici comment concevoir, documenter et exploiter une telle hiérarchie.
1) Pourquoi une hiérarchie est nécessaire
Un seul point focal : toutes les équipes tirent dans la même direction, les conflits de métriques sont minimes.
Causalité transparente : on comprend pourquoi le NSM se déplace (arbre conducteur).
Rapidité des solutions : les métriques locales sont directement liées à l'effet business.
Résistance : les guardrails évitent les « effets secondaires » de l'optimisation.
2) Couches et termes
North Star Metric (NSM) : métrique principale de la valeur (par exemple, « Mois des utilisateurs payants actifs »).
Résultats commerciaux : chiffre d'affaires, marge, GGR, part de marché, NPS - associés, mais pas toujours NSM.
Arbre conducteur : décomposition du NSM en facteurs : volume × conversion × fréquence × chèque moyen, etc.
KPI d'équipe : indicateurs réellement gérés par l'équipe (entonnoirs, latency, PR-AUC, etc.).
Guardrails : restrictions : FPR≤x %, p95 latency≤y, la part des zhalob≤z est « freins » à la croissance.
Métriques de processus : vitesse de sortie, qualité des données, mises à jour SLO - prennent en charge le système.
3) Comment choisir North Star
Critères : reflète la valeur pour l'utilisateur, est corrélé avec le revenu à long terme, est sensible aux changements de produits, est compréhensible et résistant à la manipulation.
Exemples :- Produit B2C : 'WAU payant' ou 'Sessions avec une action cible réussie/mois'.
- Marketplace : « Transactions réussies terminées/mois ».
- Plate-forme ML : « Proportion de demandes traitées par le modèle avec SLA ≤ X ms et calibrage dans la tolérance ».
4) Construire un arbre de pilotes (Arbre pilote)
1. Définissez la formule NSM.
2. Décomposez en facteurs multiplicatifs/additifs.
3. Ajoutez une couche de bras guidés.
4. Liez les métriques de tôlerie aux commandes.
5. Pour chaque site, les niveaux propriétaire et cible.
NSM: Активные платящие (MAPU)
= Активные пользователи × Доля платящих × Средняя частота платежей × Средний чек
├─ Активные пользователи = Трафик × Активация × Удержание
│ ├─ Трафик = Органический + Платный (CR кампаний, CAC)
│ ├─ Активация = Конверсия онбординга (шаги воронки)
│ └─ Удержание = D7/D30, когорты
├─ Доля платящих = Propensity-модели + Офферы (guardrail: RG/фрод)
├─ Частота = Миссии/квесты, контент-ротация
└─ Средний чек = Прайсинг, бандлы (guardrail: жалобы/возвраты)
5) Cibles en cascade (OKR/KPI)
Niveau d'entreprise : NSM + 3-5 conducteurs (année/trimestre).
Fonctions/produits : sous-arbres de pilotes (Δ cibles).
Commandes : KPI sur les feuilles d'arbre ; ciblage au format OKR (Commit/Stretch).
Individuellement : métriques de tâche (via une contribution à un KPI de commande).
- D'un niveau, ≤7 métriques (surchauffe tue le focus).
- Tous les objectifs sont liés à un nœud unique de l'arbre (pas de duplication).
- Pour les couples en conflit, une priorité explicite et/ou un compromis via les guardrails.
6) Guardrails : Comment poser des « borts »
Attribuer pour les zones à risque :- Qualité/expérience : p95 latency, crash-free %, tolérance aux pannes.
- Éthique/conformité : Antifroda FPR, proportion de plaintes, indicateurs RG.
- Données : Freshness, Completeness, PSI dérive.
- Finances : marge ≥ X, taux de charge ≤ Y.
Guardrails est une ligne obligatoire dans chaque OKR/passeport métrique ; le déclenchement bloque le rollout.
7) Formules, sources et couche sémantique
Toutes les métriques de l'arbre sont définies dans la couche sémantique (définitions uniques, rouleaux, calendrier, devises/temporisations).
Versioning : 'METRIC _ NAME _ vN' ; toute modification de formule = nouvelle version + backfill/rapprochement.
Passeport métrique (bref) : code, définition, formule/SQL, sources, granularité, segments par défaut, unités/devises, SLO fraîcheur et disponibilité, propriétaires, guardrails, historique des changements.
8) Fréquences de mesure et SLO
Métriques opérationnelles : min/heure (SLO lag ≤ 10-15 min).
Produit/commercialisation : jour/semaine (obligatoire WoU/normalisation saisonnière).
Financier : semaine/mois (rapprochement avec la comptabilité).
Les métriques ML sont produites : streaming + devis hors ligne différés (OOT).
Chaque métrique sur le dashboard montre : « mis à jour X min en arrière » et SLO planifié.
9) Dashboards et critiques
Couche exécutive : Pilotes clés NSM +, widgets alert guardrails.
Couche de domaine : entonnoirs, cohortes, apport de facteurs (cascades/décomposition).
Couche ops/ML : SLA, erreurs, dérive, calibration, latency p95/p99.
Rituels : quotidien (opération), weekly (tactique), monthly/QBR (stratégie/OKR).
Sur les aperçus, utilisez l'arbre : montrez le nœud, l'écart, les hypothèses, le plan.
10) Ancrage aux responsabilités (RACI)
Pour chaque nœud de l'arbre :- Responsible : l'équipe propriétaire du KPI.
- Comptable : leader du domaine/produit.
- Consulté : analyse/données/conformité.
- Informed : équipes connexes/top management.
Les conflits d'indicateurs sont résolus au niveau de l'arbre commun avec la participation de Comptable.
11) Exemples de « mini-arbres » par domaine
Commercialisation :- « Utilisateurs de qualité attirés = Trafic × Part de prospects qualifiés × CR dans l'inscription × Part de marque »
- Guardrails : SAS≤targeta, Brand Safety, spam rate.
- 'WAU = DAU × Fréquence × Stick...'
- Guardrails: crash-free ≥ 99. 5 %, plaintes ≤ seuil.
- « Chiffre d'affaires = Payeurs actifs × Fréquence des paiements × Chèque moyen »
- Guardrails : refund %, taux de charge, indicateurs RG.
- « Effet d'entreprise = Pertes bloquées − Coût des faux verrous »
- Principaux indicateurs clés : PR-AUC, Recall@FPR≤x %, Coverage ; Guardrails : latency p95, proportion d'appels.
12) Anti-modèles
Définitions incohérentes : « Retraite » est considéré différemment - traité par la couche sémantique et les versions.
Optimisation du proxy : croissance des clics sans croissance NSM - sécurisez via NSM et guardrails.
Trop de métriques : « panneau d'avion » - laissez le ≤7 au niveau.
Pas de propriétaire : la métrique du « nul » se dégrade rapidement.
Modifications silencieuses des formules : toujours une nouvelle version + changelog.
13) Modèles d'artefacts
A. Passeport du nœud de l'arbre
Nœud : 'RETENTATION _ D30'
Rôle dans l'arbre : Pilote NSM
Formule (objet sémantique) : référence/code
Segments : pays/canal/plateforme
Propriétaire : Product Analytics
Objectifs (trimestre) : Commit/Stretch
Guardrails : churn de plaintes ≤ X, données freshness ≤ 1 h
Risques/hypothèses : Saisonnalité, mix de trafic
Date/version : 2025-Q4, v2
B. Carte de la cascade de cibles (exemple)
NSM (société) : MAPU + 8 % YoY
Produit : Retraite D30 + 2 p.p.
Commande Onbording : Inscription activée + 5 pp
Marketing : Pistes qualitatives + 12 % avec CAC ≤ ciblage
Monétisation : ARPPU + 6 % à refund % ≤ seuil
C. Runbook des anomalies
Événement : Échec du DAU − 10 % DoD
Actions : vérifier la fraîcheur des données → les incidents de sortie → les canaux de trafic → les régions/plates-formes → RCA et le plan
14) Chèque de mise en œuvre de la hiérarchie
- Défini par NSM et son lien avec la valeur/les revenus
- Arbre conducteur construit et documenté (propriétaires, formules, sources)
- Pour chaque nœud - cibles, guardrails, taux de rafraîchissement et SLO
- Les métriques sont dans la couche sémantique, les versions et le dictionnaire des termes sont cohérents
- Personnaliser les dashboards selon les couches et les rituels d'examen (daily/weekly/monthly/QBR)
- RACI est fixé ; les conflits et les priorités des KPI sont décrits
- Runbooks sur les écarts types ; alertes sur NSM/guardrails
- Plan de vérification de l'arbre une fois par trimestre ; supprimer les sites obsolètes
Total
La hiérarchie des indicateurs est un NSM → un arbre de pilotes → des KPI → des guardrails de commande fixés dans la couche sémantique et reliés aux rythmes de contrôle. Cette conception rend les objectifs transparents, la responsabilité explicite et les changements mesurables et contrôlables.