web-dev-qa-db-fra.com

Problème de test A / B Optimizely et Google Analytics avec résolution d'écran = (non défini)

Nous avons configuré un A/B dans Optimizely pour tester un tout nouveau design:

http://offerta.se

que nous testons par rapport à notre conception héritée:

http://offerta.se/?classic=1

Optimizely est configuré pour rediriger 50% de notre trafic CPC vers la conception héritée.

L'ancien modèle bat le nouveau avec un taux de conversion supérieur d'environ 10% et tente d'expliquer pourquoi nous avons commencé à chercher s'il y avait quelque chose qui se démarquait dans Google Analytics.

Optimizely crée les événements avec les étiquettes "New design" et "Legacy design" pour nous dans GA.

Et en filtrant sur ceux-ci et en regardant "Résolution de l'écran = (non défini)", nous voyons des nombres étranges:

enter image description here

Si nous supprimons tout le trafic avec "Screen Resolution = (not set)", le nouveau modèle affiche 10% de mieux que l'ancien.

Quelqu'un qui peut m'éclairer?

3
Niels Bosma

Selon l'article suivant, "Résolution d'écran = (non défini)" signifie qu'aucune information concernant la résolution d'écran du visiteur n'a été enregistrée: https://support.google.com/analytics/answer/2820717?hl=fr

Examiner vos données pour tous les visiteurs agrégés, ou supprimer les visiteurs dont la résolution de l'écran est inconnue, consiste essentiellement à examiner différents segments de vos données.

Il se peut que les visiteurs avec différentes résolutions d'écran réagissent différemment à vos conceptions. Ainsi, inclure ou exclure des résolutions d'écran (ou des visiteurs pour lesquels aucune résolution d'écran n'est connue) peut avoir un résultat différent.

Si vous souhaitez optimiser votre site Web pour le trafic global, vous devez consulter le résultat agrégé.

Pour en savoir plus: (à partir du support Google)

Il est assez courant que la résolution d'écran présentant le taux de conversion en ligne le plus élevé soit (non définie). En outre, une incidence élevée de taux de commerce électronique (non définis) peut se produire pour ces dimensions:

Flash Version (occurs if Flash is disabled in browser settings)    
Screen Colors    
Language (in demographics report)    
Generally, these traffic segments are small, and so are not statistically significant.

et

résolution du navigateur et de l'écran

Utilisez la résolution du navigateur ou de l’écran comme dimension afin de voir si le trafic est réparti entre les navigateurs ou les résolutions d’écran comme prévu et pour voir s’il existe des pages qui subissent une chute inhabituelle avec un navigateur ou une résolution d’écran particulier. Si vous remarquez une chute importante d'une page, il se peut que le rendu ne soit pas correct dans ce navigateur ou à cette résolution. Par exemple, le rendu de votre page peut ne pas être correct sur un navigateur mobile ou à une résolution inférieure, ce qui entraîne l'absence de liens ou de boutons, ou la difficulté à les voir. "

De plus, vos résultats affichent correctement les résultats alloués à 50/50 sur vos deux variantes (et leur cible) offerta.se/google et la redirection: offerta.se/google?classic=1. Le rapport GA via la chaîne de résolution d'écran = (non défini) affiche des données segmentées sur lesquelles Optimizely n'a aucun effet.

3
Optimizely Support