À quoi ressemble le test A/B.
Les tests de marché qui nous ont aidés à obtenir la recherche Google que nous connaissons aujourd'hui sont imités par des secteurs allant de l'hôtellerie à la fabrication pour mieux cibler leurs produits et services et répondre aux besoins des clients. Alors, qu'a fait Google ?
Si vous voyagez dans le temps d'Internet via Internet Archive, vous pouvez voir à quoi ressemblait Google peu de temps après son lancement, il y a plus de 20 ans.
Bien que le logo soit familier, l'aspect et la convivialité du site Web étaient très différents de ce qu'il est maintenant. Comment Google est-il devenu le plus rapide à charger, plus agréable à voir, plus facile à lire, pages et applications que nous utilisons aujourd'hui ?
Un employé senior de Google m'a dit que le moteur de recherche avait une longueur d'avance sur la concurrence grâce à un processus de test de prototype rigoureux. Au moment où nous avons parlé, les prototypes ont été testés "hors ligne" en mesurant les réactions des sujets de test embauchés à des caractéristiques et des conceptions particulières. Mais bientôt les tests sont passés "en ligne" et nous sommes tous devenus des sujets de tests A/B.
Qu'est-ce que le test A/B ?
Un test A/B se produit lorsqu'une entreprise donne à un utilisateur l'accès à l'une des deux versions d'un site Web ou d'une application :
(A) la version actuelle
(B) le prototype.
La façon dont les utilisateurs interagissent avec le produit est mesurée lors des tests. De subtiles différences dans ces interactions peuvent illustrer quelle version est la plus efficace, selon des critères particuliers. Si le prototype s'avère supérieur, il remplace la version existante en tant que produit par défaut.
Les ingénieurs de Google ont effectué leur premier test A/B en 2000 pour déterminer le nombre optimal de résultats de recherche à afficher par page.
Les statistiques décident, pas les gestionnaires
Les sites Web et les applications sont devenus une constellation de comparaisons qui font évoluer collectivement les systèmes vers un état amélioré. Chaque modification d'une interface ou altération d'un algorithme est testée A/B.
Les sociétés Web effectuent un nombre étonnant de tests. Dans un discours, Microsoft a déclaré que le moteur de recherche Bing fonctionne sur 1, 000 par mois. Tant, En réalité, que chaque fois que nous accédons à un site Internet ou à une application, nous sommes probablement des sujets involontaires d'un test A/B. Nous sommes rarement au courant des tests car les variations sont souvent subtiles.
Les entreprises sont capables d'effectuer tellement de tests qu'elles sont passées à un processus connu sous le nom d'escalade :faire de petits pas, de mieux en mieux. Cette approche a connu un tel succès qu'elle détermine la façon dont de nombreuses entreprises innovent aujourd'hui.
Une première version de Google. Crédit :Internet Archive
Les équipes sont chargées de l'objectif d'augmenter les mesures des utilisateurs. Si un petit tweak réservoirs, c'est tombé. S'il triomphe, c'est lancé. Les décisions sont prises par les statistiques, pas les gestionnaires.
En effet, les partisans de l'A/B testing soulignent l'importance d'ignorer le point de vue des managers, qu'ils appellent HiPPOs - les opinions de la personne la mieux payée. Cet acronyme a été inventé à partir de contes tels que celui de Greg Linden, un des premiers employés d'Amazon. Linden a suggéré que, tout comme les supermarchés mettent des magazines et des collations dans la file d'attente des caisses, Amazon devrait adopter la même approche avec ses paniers d'achat en ligne.
Il rappelle qu'un "senior vice-président était catégoriquement opposé" à l'idée, craignant que cela décourage les gens de vérifier.
Linden a ignoré le HiPPO et a effectué un test A/B. Les résultats ont montré qu'Amazon gagnerait plus d'argent et ne perdrait pas de clients, donc l'idée de Linden a été lancée. Les tests A/B se sont avérés plus précis, plus rapide et moins biaisé que n'importe quel HiPPO.
Les tests A/B ne peuvent pas tout résoudre
La partie compliquée des tests A/B consiste à déterminer comment mesurer les utilisateurs de manière à fournir les informations dont vous avez besoin. Les tests doivent être soigneusement conçus, et continuellement révisés.
Faites-le mal et vous pourriez réussir à court terme, mais échec sur le long terme. Un site d'actualités qui fait la promotion d'informations sur des célébrités pourrait obtenir la gratification immédiate des clics, mais perdez des lecteurs fidèles au fil du temps.
Il y a aussi des limites à ce que les tests A/B peuvent observer. Le test repose sur la mesure de l'entrée de l'utilisateur, clics de souris, dactylographie, commandes vocales, ou appuyez sur un écran mobile. Spotify a récemment demandé si quelqu'un avait une liste de lecture en arrière-plan et qu'il n'interagissait pas avec son téléphone, comment Spotify peut-il mesurer si l'utilisateur est satisfait ? Personne n'a actuellement de réponse.
Faire des tests A/B hors ligne
Malgré ces risques et limites, le succès des tests A/B s'étend à toutes les entreprises présentes sur Internet. Et maintenant, ce test est testé dans le monde physique.
Il y a quelques années, J'ai rencontré une entreprise qui imprime et envoie des factures de services publics aux clients. Ils ont testé A/B différents formats de facture, apprendre quels formats ont amélioré les taux des clients qui paient à temps.
Les restaurants et les bars utiliseraient les données de capteurs pour savoir quelle disposition de restaurant encourage le plus les ventes. Par exemple, si une disposition intime des sièges au fond d'un bar incite les gens à rester plus longtemps, les clients de cet espace sont susceptibles de dépenser plus en boissons.
Les tests A/B pourraient même s'étendre à la fabrication. Des versions légèrement différentes d'un produit pourraient être fabriquées sur des lignes de production flexibles. La production pourrait alors être modifiée si une version du produit se vendait mieux qu'une autre.
Ce n'est pas toujours une conduite en douceur, mais la puissance des tests A/B est là pour rester.
Cet article est republié à partir de The Conversation sous une licence Creative Commons. Lire l'article original.