Évaluer les cohortes de comptes à maturité comparable

La décision de prendre

Une liste cible récente peut différer d'une liste antérieure dans les niveaux, les territoires, l'engagement de base, la structure des comptes et des familles et les possibilités existantes. Il a aussi eu moins de temps pour mûrir. La comparaison des totaux bruts des pipelines traite ces différences comme des résultats du programme. Une définition de cohorte utile corrige qui est entré, pourquoi ils se sont qualifiés, leur état de départ, et le temps disponible pour un résultat. L'évaluation de la cohorte peut révéler où un programme fonctionne de façon opérationnelle, mais une différence descriptive ne devrait pas automatiquement devenir une revendication d'incidence causale.

Bâtir l'approche pratique

Créer une table de participation datée à l'admissibilité ou à l'affectation du programme, avant d'observer la participation. Préserver l'ID de compte stable, la famille de compte, le niveau, le segment, la date d'entrée, l'état de l'opportunité de départ, l'engagement de base, la propriété du vendeur et le jeu prévu. Choisissez un résultat et une fenêtre de suivi fixe à partir de l'entrée. Marquez les comptes qui n'ont pas encore terminé la fenêtre au lieu de les marquer comme résultats ratés. Séparer les comptes libres d'opportunités des comptes déjà en attente parce que la nouvelle formation et la progression ont différents dénominateurs. Comparer les caractéristiques de base et révéler des déséquilibres significatifs. Utiliser des variables préexistantes pour l'appariement ou la stratification; ne pas sélectionner un groupe de comparaison en fonction de l'inactivité ultérieure ou sélectionner des comptes traités en fonction de la fréquentation. Conserver les comptes attribués dans la vue principale et montrer la participation séparément. Définir la façon de procéder pour les fusions, les fermetures, les erreurs d'admissibilité, la réaffectation et l'entrée répétée du programme. Maintenir la composition initiale et un tableau de modification documenté. Inspecter les retombées lorsque des entités apparentées partagent des contacts ou des achats. Lorsque l'affectation aléatoire est possible, planifiez-la avant le lancement; sinon, indiquez les limites de sélection restantes dans l'interprétation.

L'exploration de cohortes Google Analytics définit les critères d'inclusion et de retour et utilise les données d'appareils plutôt que l'ID utilisateur pour la création de cohortes. Google Analytics: Cohort exploration.

Le flux de travail pratique

1. Gel de la date d ' adhésion
2. Enregistrer l'état de départ
3. Définir des fenêtres de suivi égales
4. Vérifier le solde de la cohorte
5. Garder les comptes attribués visibles

Comparer les approches

Travail à travers un scénario illustratif

Scénario illustratif : une cohorte de cadres supérieurs semble créer plus de pipelines qu'une cohorte nourricière. Les invités à l'événement offrent déjà des possibilités plus ouvertes, et les invités récents ont un suivi incomplet. L'analyste doit décider de comparer tout le monde sur la liste des comptes courants ou de reconstruire les conditions d'entrée. Ils reconstituent les dates d'adhésion, séparent les comptes sans possibilité d'entrée et comparent des fenêtres d'observation égales dans des segments communs. Une fusion lie un compte traité à un compte de comparaison; cette affaire est signalée pour examen de sensibilité plutôt que pour réaffectation silencieuse. L'équipe peut décrire la différence de cohorte mature observée et la participation opérationnelle, mais elle ne peut pas prétendre que l'événement a causé toutes les occasions associées.

Mesurer si le travail est utile

Définir la taille de la cohorte mature comme étant un compte d'entrée avec une fenêtre d'observation des résultats terminée à la limite de déclaration. La conversion de compte à nouveau qualifié-opportunité est des comptes d'entrée matures, sans opportunité qui atteignent l'événement défini divisé par des comptes d'entrée matures, sans opportunité. La progression utilise un dénominateur distinct des possibilités qui se présentent à un stade d'entrée indiqué. Le pipeline créé par compte admissible divise la valeur d'opportunité qualifiée distincte par la population d'entrée admissible totale selon une valeur fixe. Afficher les montants distribués ainsi que les totaux. Déclarez le solde de référence en utilisant les dénombrements ou les distributions réels du niveau, de l'état des possibilités et de l'activité antérieure. Le taux de participation est attribué aux comptes satisfaisant à la règle d'exposition admissible divisée par les comptes attribués. Énumérer séparément les comptes d'identité immatures, modifiés et non résolus, avec leur traitement de déclaration.

Le NIST décrit le blocage comme formant des groupes homogènes pour tenir compte des facteurs de nuisance contrôlés dans une expérience. NIST: Randomized block designs.

Éviter les points communs de défaillance

Le filtrage des comptes engagés après le lancement permet à un programme de choisir son propre dénominateur réussi. La propriété ou le niveau actuel peut réécrire l'historique sans être membre daté. La comparaison d'une cohorte mature avec une cohorte immature sous-estime les résultats récents. L'appariement des variables affectées par le traitement peut fausser la comparaison. Les cohortes Web au niveau des utilisateurs ne représentent pas automatiquement les cohortes de comptes d'entreprise. Un compte rendu répété peut apparaître dans plusieurs cohortes de programmes, de sorte que ces totaux peuvent se chevaucher. Préserver les relations entre le compte et la famille et les cas de sensibilité. Traiter une période d'observation future vide comme des données non disponibles plutôt que comme une conversion zéro.

Votre prochaine liste de contrôle

• Cohortes à date d'entrée : Enregistrer l'état de référence. Vérifiez la limitation : le mélange de départ peut différer.
• cohortes correspondantes: Divulguer l'équilibre et les lacunes. Vérifier la limitation : la sélection non mesurée reste.
• cohortes de comptes randomisés : Planifier l'allocation avant le lancement. Vérifier la limitation : nécessite une conception et un isolement adéquats.

Utilisez la comparaison pour choisir une étape suivante délimitée. Consigner la preuve, le propriétaire responsable et la décision de révision avant d'étendre le jeu à des comptes supplémentaires.

Les questions auxquelles ce guide répond