Interpréter les résultats

Une fois Analytics configuré et le test lancé, il ne reste plus qu'à attendre... suffisamment longtemps. L'utilisation de base de Google Analytics est bien sûr de mesurer son trafic au quotidien (et d'après les estimations de Google, 90% des utilisateurs se limitent à cette fonctionnalité). Mais au delà, Analytics est en fait un outil extrêmement riche en fonctionnalités. Il est par exemple possible d'obtenir la réponse à des questions extrêmement complexes, comme par exemple : combien de visiteurs venant d'Espagne et utilisant Mozilla Firefox quittent mon site après avoir visualisé la page XYZ.

Dans notre cas, nous allons configurer GA pour obtenir les informations qui nous intéressent : des tableaux présentant les résultats de conversion en fonction des variantes du test.

Visualisation des résultats

Le moyen de plus simple de visualiser les résultats de notre expérience dans Analytics est d'utiliser le rapport standard sur les variables personnalisées. Il est accessible par le chemin: Rapports standards -> Visiteurs -> Données démographiques -> Variables personnalisées. Ici, nous présentons toutefois un rapport légèrement personnalisé. Il utilise comme statistiques le taux de conversion de l'objectif considéré, le nombre de réalisations de l'objectif considéré et le nombre de visiteurs uniques.

En ce qui concerne les critères, il faut choisir "Variable personnalisée (clé 1)" en critère principal puis "Variable personnalisée (valeur 1)" en critère secondaire. On obtient le rapport suivant:

Attention à ne prendre en compter dans votre rapport que les dates correspondantes au test en cours, sinon lors du processus itératif vous risquez de mélanger les résultats du test en cours avec ceux des tests précédents. 

Vérification de la signification statistique

Nous vous suggérons d'utiliser un outil de calcul statistique pour déterminer si votre test est significatif ou s'il faut attendre plus longtemps. De nombreux outils sont disponibles gratuitement sur le web, par exemple à l'adresse suivante :

Outil de vérification de test A/B : http://www.abtesting.fr/compute-ab-testing-statistical-significance.php.

Préparer le prochain test

Si votre test est significatif, il ne vous reste plus qu'à valider la meilleure variante (ici la variante Apparence). Il est recommandé - mais ce n'est pas obligatoire - de la déployer sur votre site: elle deviendra par conséquent le nouvel original et donc la nouvelle version de contrôle. Ensuite, vous pouvez relancer un test en choisissant la (les) nouvelle(s) variante(s) que vous désirez tester.