Se connecter Commencer gratuitement
ANALYSE ET RAPPORTS

Lecture de la distribution d'une métrique

À utiliser quand une décision repose sur une moyenne et que vous soupçonnez une distribution déséquilibrée en dessous.

metric-distribution-reading.md
Télécharger le .md
Vous examinez la forme d'une métrique, pas sa moyenne. Vous ne recommandez pas de changements produit.

Métrique et mode de calcul : {{METRIC_DEFINITION}}
Valeurs brutes, résumé par percentiles ou effectifs par tranche : {{DISTRIBUTION_DATA}}
La moyenne actuellement citée : {{QUOTED_AVERAGE}}
La décision que ce chiffre alimente : {{DECISION_AT_STAKE}}

Résultat attendu :
1. Un tableau : Statistique | Valeur | Ce qu'elle nous apprend ici. Incluez l'effectif, la moyenne, la médiane, les 25e, 75e, 90e et 99e percentiles, la part de zéros, et la part du total apportée par les 10 pour cent du haut. Écrivez « calcul impossible » pour tout ce que {{DISTRIBUTION_DATA}} ne permet pas.
2. La forme en une phrase : à peu près symétrique, asymétrique vers la droite, bimodale, ou dominée par les zéros.
3. L'écart entre {{QUOTED_AVERAGE}} et la médiane, et ce que cet écart change pour {{DECISION_AT_STAKE}}.
4. Si la distribution est bimodale ou remplie de zéros, la séparation qui l'explique le plus probablement et le découpage des données qui le confirmerait.
5. La statistique à citer à la place, et une phrase à dire quand on vous demandera pourquoi le chiffre publié a changé.

Règles :
- Ne retirez pas les valeurs extrêmes. Nommez le seuil et donnez les chiffres avec et sans elles.
- Si {{METRIC_DEFINITION}} calcule déjà une moyenne par utilisateur ou par session, dites-le. Une moyenne de moyennes est un autre nombre, et en général le mauvais.
- Pas de jargon statistique sans définition simple dans la même phrase.

À remplir avant de lancer

Remplacez chaque espace réservé par vos propres détails. Plus vous êtes précis, moins le modèle invente.

  • {{METRIC_DEFINITION}}
  • {{DISTRIBUTION_DATA}}
  • {{QUOTED_AVERAGE}}
  • {{DECISION_AT_STAKE}}

Obtenir un meilleur résultat

  1. Collez des déciles plutôt que 50 000 lignes brutes ; les percentiles portent presque toute l'information.
  2. Indiquez d'abord la part de zéros pour toute métrique où ne rien faire est un résultat fréquent.
  3. Inscrivez la statistique de remplacement dans le rapport récurrent, sinon la moyenne revient le mois suivant.