Choisir le bon outil de test A/B d'application mobile pour optimiser vos expériences utilisateur dans l'application
Publié: 2020-12-22Dans le monde mobile d'aujourd'hui, on a l'impression que tous les autres articles de blog sur Internet expliquent comment vous pouvez surpasser l'interface utilisateur et l'expérience utilisateur de votre application mobile. Optimiser en continu les expériences des applications mobiles pour améliorer l'engagement et la rétention des utilisateurs est une évidence. Mais, faire des efforts d'optimisation pour vos applications mobiles sans avoir le bon outil dans votre arsenal, c'est comme travailler sur la présentation d'un plat sans comprendre de quel matériel vous avez besoin pour le cuire à la bonne température.
Choisir le bon outil de test A/B pour applications mobiles peut être une tâche ardue pour les chefs de produit, les développeurs d'applications et les spécialistes du marketing. C'est en grande partie parce que la recherche de l'outil ou de la plate-forme idéale pour vos besoins de test uniques dépend d'une pléthore de paramètres, dont certains ont tendance à être ignorés si vous prenez des décisions hâtives ou mal informées. Devriez-vous vous concentrer sur un outil qui répond le mieux à votre cas d'utilisation ou sur un outil qui offre des intégrations faciles avec vos autres plates-formes ? Comment pouvez-vous vous assurer que l'outil n'affecte pas les performances de votre application ? Qu'en est-il des rapports ? Comment pouvez-vous être sûr de l'exactitude des résultats produits par votre outil ?
Dans la section suivante, nous discutons de tous les facteurs que vous devez prendre en compte avant d'opter pour un outil de test A/B pour application mobile.

Si vous recherchez différents outils disponibles sur le marché, vous pouvez accéder directement à cette section contenant la liste des outils.
Si vous souhaitez comprendre comment évaluer un outil d'expérimentation, lisez la suite.
Comment choisir le bon outil ?
La plate-forme de test A/B idéale pour les applications mobiles est suffisamment robuste pour offrir des fonctionnalités de test étendues qui vous permettent d'optimiser vos expériences dans l'application de bout en bout ainsi que des capacités de gestion des fonctionnalités afin que vous puissiez gérer l'ensemble de votre cycle de vie des fonctionnalités. En fin de compte, l'objectif est de trouver la bonne variation d'expériences et de fonctionnalités dans l'application afin d'optimiser votre application pour améliorer l'engagement et les conversions.
Pour sélectionner l'outil le mieux adapté à votre feuille de route CRO, tenez compte des paramètres suivants.
Cas d'utilisation à portée de main
Les tests A/B d'applications mobiles ont une myriade de cas d'utilisation. Pour que vous puissiez sélectionner le bon outil pour votre entreprise, vous devez d'abord avoir une compréhension claire des cas d'utilisation que vous souhaitez aborder (au moins ceux que vous souhaitez commencer). Une fois que vous êtes clair à ce sujet, vous vous rapprochez automatiquement de l'outil qui offre le maximum de fonctionnalités répondant à vos besoins.
Certains des cas d'utilisation les plus courants des tests A/B d'applications mobiles incluent :
commerce électronique
Éliminer les frictions dans les principaux flux d'utilisateurs
Pour l'acheteur d'aujourd'hui en déplacement qui exige des expériences d'achat fluides, la friction dans les flux d'utilisateurs, en particulier un flux aussi critique que le paiement, peut entraîner de la frustration et une perte d'intérêt, ce qui augmente finalement votre taux d'abandon. En fait, saviez-vous que le mobile a le taux d'abandon de panier le plus élevé (battant les tablettes et les ordinateurs de bureau) de 85,65 % ? Les tests A/B des flux d'utilisateurs de votre application de commerce électronique peuvent vous aider à réduire radicalement les taux d'abandon et d'abandon, en ouvrant la voie à une expérience utilisateur agréable.

Les outils de test A/B des applications mobiles vous permettent de créer deux variantes (ou plus) de vos flux d'utilisateurs afin que vous puissiez les opposer les uns aux autres et déployer celui qui conduit à l'amélioration maximale des métriques clés de votre application. De plus, votre outil doit également vous permettre de segmenter vos utilisateurs en fonction de leur comportement d'achat et de navigation, et d'autres attributs démographiques afin que vous puissiez les cibler avec la variation la plus pertinente et déterminer ce qui fonctionne pour quel groupe.
Optimisation de l'efficacité des algorithmes de recherche et de recommandation de produits
Votre algorithme de recommandation de produits doit-il être basé sur l'historique d'achat des acheteurs, les articles tendance ou les produits les plus populaires d'une catégorie particulière ? Comment votre algorithme de recherche doit-il catégoriser les produits, décider de leur pertinence par rapport à une requête de recherche spécifique et sur quels critères doivent-ils être classés sur la page des résultats de recherche ?
Avec les tests A/B d'applications mobiles, vous ne devriez pas avoir à vous fier à des conjectures ou aux meilleures pratiques pour trouver les réponses aux questions ci-dessus. Bien que le test des modifications basées sur l'interface utilisateur soit un cas d'utilisation auquel un outil robuste répond, il vous permet également d'expérimenter vos algorithmes critiques, y compris la recommandation et la recherche de produits, afin que vous puissiez améliorer stratégiquement leur efficacité. En testant plusieurs versions de vos algorithmes, vous pouvez déterminer celle qui s'avère la plus efficace pour votre boutique, qu'il s'agisse de générer des ventes incitatives/croisées ou d'extraire les résultats de recherche les plus pertinents.
Jeux
Expérimenter les fonctionnalités intégrées à l'application avant le déploiement universel
Le déploiement universel d'une nouvelle fonctionnalité dans votre jeu peut être assez délicat. Vous pouvez soit toucher le jackpot et regarder instantanément les niveaux d'utilisation et d'engagement de votre application augmenter, soit, sur une note plus réaliste, cela peut ou non générer les résultats que vous pensiez. Par conséquent, les outils de test A/B des applications mobiles vous permettent de réduire le risque associé au lancement de modifications et de mises à jour dans le jeu en les expérimentant et en les déployant par étapes à un ou plusieurs de vos segments d'utilisateurs. S'il fonctionne bien, vous pouvez continuer et le déployer pour tous les utilisateurs ; sinon, vous pouvez toujours recueillir des commentaires, les intégrer, les améliorer et relancer la version améliorée en toute confiance.

Les outils de test A/B des applications mobiles offrent également des capacités étendues de gestion du cycle de vie des fonctionnalités dans lesquelles vous pouvez déployer des fonctionnalités par étapes, les tester sur un segment d'utilisateurs particulier et même utiliser des indicateurs de fonctionnalité pour les gérer au moment de l'exécution et contrôler et/ou modifier qui obtient y accéder.
Rationalisation de la stratégie de tarification in-app
Pour maximiser l'engagement sur votre application de jeu ainsi que les revenus, vous devrez peut-être expérimenter plusieurs stratégies de tarification, pour différents segments d'utilisateurs, car le même modèle peut ne pas fonctionner à la fois pour les joueurs désengagés et fidèles. Par conséquent, choisissez un outil de test A/B pour application mobile qui vous permet de tester votre algorithme de tarification dynamique afin de déterminer lequel génère les meilleurs résultats pour quel segment.
Offrez des expériences de jeu personnalisées
De nos jours, les expériences de jeu sur les applications mobiles exigent une hyper-personnalisation, et à juste titre. Pour créer un environnement de jeu attrayant qui maintient les joueurs accrochés, vous ne pouvez pas compter sur une seule stratégie. À l'aide d'un outil de test A/B d'application mobile, vous pouvez tester tous les éléments dynamiques de votre application de jeu et offrir des expériences personnalisées en fonction du niveau de chaque joueur dans le jeu, du score d'engagement et d'autres attributs. De cette façon, vous pouvez constamment découvrir et répondre à ce que vos utilisateurs attendent de vous pour les maintenir engagés.
L'essentiel est que, quel que soit le cas d'utilisation que vous souhaitez réaliser avec les tests A / B d'applications mobiles, vous voulez en être sûr au préalable afin de pouvoir prendre une décision stratégique en choisissant le bon en fonction de vos besoins.
Intégrations et plugins proposés par l'outil
Vous voulez vous assurer que l'outil que vous choisissez est le bon ajout à votre pile technologique, ce qui signifie qu'il s'intègre de manière transparente à vos autres plateformes d'analyse, de marketing et de vente, afin que vous n'ayez pas de difficulté à accéder aux données requises et l'alimenter dans le pipeline d'optimisation de votre application. Par exemple, la plus importante serait votre plate-forme d'analyse, vous pouvez donc l'utiliser pour générer des informations sur le trafic et l'audience de votre site Web, qui serviront ensuite de base à l'élaboration d'hypothèses.
Pour cela, créez une liste des outils que vous utilisez actuellement et recherchez ceux pris en charge par la plateforme d'expérimentation que vous évaluez. Si vous possédez une entreprise de commerce électronique, vous voudrez peut-être également vous assurer que la plate-forme de commerce électronique sur laquelle votre magasin est construit (telle que Shopify ou WooCommerce) est également prise en charge.
VWO, par exemple, s'intègre à tous les principaux outils d'analyse Web, plates-formes de commerce électronique, plates-formes CSM, ventes et plates-formes ABM.
Taille, utilisation de la RAM et performances du SDK
Le SDK pris en charge par la plate-forme mérite votre attention et peut avoir un impact sur les performances de votre application. Voici les paramètres pour lesquels vous devez l'évaluer :
- Le SDK doit être léger, il n'a donc pas d'impact majeur sur la taille de votre application.
- Ne devrait pas utiliser beaucoup de RAM car les appareils mobiles ont de toute façon peu de RAM disponible.
- Doit bien performer et être facilement disponible en tout temps. Le SDK de VWO pour les tests A/B d'applications mobiles est disponible même sans connexion Internet active et est testé de manière approfondie pour éliminer tous les bogues qui pourraient avoir un impact négatif sur les performances de votre application.
Capacités de rapport
Il est important de faire attention à la compréhension du calcul des résultats des tests A/B et de la génération de rapports car cela détermine l'impact de votre expérimentation. Les statistiques sont l'épine dorsale des tests A/B, qui sont basés sur le calcul de probabilités. Cependant, il existe plusieurs approches pour interpréter les probabilités dans les tests A/B - les plus courantes étant les modèles fréquentistes et bayésiens.
Assurez-vous de savoir si l'outil que vous avez présélectionné utilise le modèle statistique fréquentiste ou bayésien. Traditionnellement, la plupart des outils utilisaient le modèle fréquentiste dans lequel les résultats des tests sont basés uniquement sur les données de l'expérience en cours et ne prennent en compte aucune donnée précédente. Le modèle fréquentiste est basé sur l'exécution d'un test particulier pendant une période de temps spécifique et jusqu'à ce que la signification statistique soit atteinte afin que suffisamment de données puissent être collectées pour calculer à juste titre la probabilité qu'une variation batte l'autre. Cependant, il ne quantifie pas la différence entre les deux variations en tenant compte de l'incertitude liée à la quantité de données que vous avez obtenues lors d'un test.

Le modèle statistique bayésien, d'autre part, offre un moyen naturel d'apprendre en vous permettant d'intégrer vos croyances issues d'expériences précédentes similaires dans le modèle comme précédemment, de le combiner avec les données de l'actuel, puis de calculer les résultats du test. La probabilité que votre hypothèse soit correcte est calculée en fonction de l'évolution des données et informée de ce qui s'est passé jusqu'à ce point.
Le moteur de statistiques bayésien de VWO, SmartStats, vous aide à prendre des décisions d'optimisation de conversion plus intelligentes en vous donnant non seulement la probabilité qu'une variation batte l'autre, mais également la perte potentielle associée à son déploiement. Avec SmartStats, vous pouvez ne plus compter uniquement sur l'atteinte d'une signification statistique ou sur l'exécution de tests pendant une période définie, et vous pouvez conclure les tests plus rapidement et attendre des résultats plus précis. SmartStats vous aide à prendre des décisions commerciales intelligentes, plus rapidement et à acquérir un avantage concurrentiel sur vos concurrents.
Imaginez un scénario dans lequel vous ne savez pas si fournir une offre complémentaire avec votre service peut entraîner une augmentation des ventes. Vous avez prévu de faire un test A/B pour tester cette hypothèse en allouant une moitié du trafic au service avec add-on (Variante A) et l'autre moitié sans add-on (Variante B).
Un test fréquentiste traditionnel ne fournirait une réponse oui/non que si la variation A est différente de la variation B. De plus, les résultats du test ne sont valides qu'après avoir obtenu un nombre suffisant de visiteurs dans votre test.
Cependant, le moteur de statistiques bayésien de VWO, SmartStats, vous fournit les chances qu'une variation batte l'autre ainsi que la perte potentielle sous-jacente de ventes associée à chaque variation. Les deux métriques restent valables pendant toute la durée du test.
Avec SmartStats, vous pouvez passer des sorties binaires à des métriques plus interprétables.

Ton budget
Inutile de dire que votre budget est un facteur important à prendre en compte dans le choix d'un outil. En fonction des cas d'utilisation spécifiques que vous souhaitez aborder et des fonctionnalités dont vous avez besoin, vous devrez rechercher un outil qui correspond à la facture ainsi qu'à votre budget afin que vous puissiez générer un retour sur investissement significatif de votre programme d'expérimentation.
Surtout si vous débutez dans l'optimisation des applications mobiles, opter pour un outil relativement coûteux peut ne pas vous rapporter un retour sur investissement significatif. Au lieu de cela, commencez par un outil qui offre un essai gratuit, afin que vous puissiez évaluer toutes ses fonctionnalités de manière exhaustive et décider s'il répond à vos besoins. VWO, par exemple, propose un essai gratuit que votre équipe peut utiliser pour lancer quelques campagnes et déterminer si vos besoins uniques sont satisfaits.
Support et assistance proposés par la plateforme
Lors de l'évaluation d'un outil, les gens négligent souvent le niveau et la qualité du support offert par la plateforme. Cependant, il s'agit d'un facteur critique qui joue un rôle majeur dans la détermination de la vitesse de test et de l'échelle de votre programme d'optimisation. Si vous bénéficiez d'une assistance dédiée et experte tout au long de votre parcours, vous pourrez atteindre vos objectifs plus efficacement et accroître vos efforts avec le temps.
De plus, si vous débutez dans les tests A/B d'applications mobiles, vous aurez peut-être besoin d'aide pour configurer les premières campagnes et obtenir des réponses à vos questions. Assurez-vous donc d'opter pour un outil qui offre le meilleur support de sa catégorie (temps de réponse rapide, disponibilité maximale, ressources d'auto-assistance suffisantes, support omnicanal, CSAT, etc.) afin que vous puissiez non seulement vous mettre à niveau, mais aussi conduire efficacement les résultats escomptés.

Même si vous êtes un peu expérimenté et familiarisé avec les tests A/B de vos expériences d'application mobile, vous pourriez avoir besoin d'une assistance étendue immédiatement après vous être inscrit à un nouvel outil. À cette fin, assurez-vous d'opter pour un outil qui offre un support dédié, des TAT rapides et une résolution efficace pour vous aider à résoudre tous vos obstacles d'expérimentation.
À vrai dire, vous avez besoin d'un outil qui englobe tout. Il n'y a pas un facteur mentionné ci-dessus qui soit moins important et vous ne devriez pas avoir à faire de compromis sur la qualité des tests ou sur vos exigences.
VWO Mobile App Testing - Une plate-forme complète pour tous vos besoins d'optimisation in-app
VWO Mobile App Testing est une solution robuste pour l'optimisation des applications mobiles. Qu'il s'agisse d'expérimenter plusieurs variantes d'expériences utilisateur intégrées à l'application (à la fois basées sur l'interface utilisateur et côté serveur) ou de tester des fonctionnalités clés avant et après le lancement, vous pouvez tout faire en toute simplicité. Que vous souhaitiez tester les changements de base de l'interface utilisateur tels que le CTA ou la copie, la couleur et le placement de la bannière, ou apporter des optimisations drastiques à vos algorithmes de moteur de recherche, vos expériences de jeu et au-delà, vous êtes bien équipé pour augmenter régulièrement l'engagement, l'utilisation, la rétention et les conversions.
Vous pouvez également combiner les tests A//B d'applications mobiles avec VWO Insights qui offre des capacités de cartographie thermique, d'enregistrement de session et d'analyse de formulaires afin que vous puissiez recueillir des informations exploitables sur l'expérience utilisateur de votre application et les convertir en opportunités d'optimisation.

VWO propose des options avancées de segmentation et de ciblage qui vous permettent de segmenter vos utilisateurs en fonction de leurs attributs comportementaux et de les cibler exclusivement. VWO s'intègre également à toutes les principales plates-formes d'analyse afin que vous puissiez capturer et analyser les données pertinentes nécessaires pour prendre des décisions d'expérimentation éclairées.
Le SDK de VWO pour les tests A/B d'applications mobiles est open source et léger (environ 200 Ko pour Android et 285 Ko pour iOS) qui n'utilise qu'environ 100 Ko ou 300 Ko de RAM pour Android et iOS.
En dehors de cela, VWO offre une assistance 24 heures sur 24, 7 jours sur 7, 365 jours par an (et un temps de réponse exceptionnel) avec des experts en optimisation qui vous assistent tout au long de votre parcours pour vous assurer d'obtenir les résultats souhaités de vos campagnes. Avec un CSAT de 98 % (par rapport à la moyenne de l'industrie de 94 %), l'équipe d'assistance de VWO prend entièrement en charge la résolution de tous les pièges que vous pourriez rencontrer, vous assurant ainsi de tirer le meilleur parti de votre programme d'optimisation d'applications mobiles.
Si vous avez des appréhensions sur la façon dont VWO tient ces promesses, que diriez-vous de l'essayer gratuitement et de l'évaluer par vous-même ? Si vous avez des questions à ce sujet, vous pouvez demander une démonstration à l'un des experts en optimisation de VWO et obtenir des réponses.
Autres outils de test A/B pour applications mobiles
Voici une liste de quelques autres outils connus pour l'expérimentation d'applications mobiles, ainsi que leur tarification.
De façon optimale
Optimizely offre une solution multiplateforme pour le signalement et l'expérimentation des fonctionnalités qui vous permet d'exécuter des expériences basées sur l'interface utilisateur ainsi que côté serveur et également d'atténuer les risques lors du lancement des fonctionnalités. Vous avez accès à des capacités d'expérimentation complètes et multicanaux, à des déploiements de fonctionnalités par étapes, à la possibilité d'effectuer des mises à jour instantanées des applications, et bien plus encore avec l'offre d'optimisation mobile d'Optimizely. Ils proposent un plan de déploiement gratuit valable 7 jours qui vous permet d'évaluer leurs capacités de base.
LancerDarkly
LaunchDarkly offre des capacités de gestion et d'expérimentation des indicateurs de fonctionnalités à grande échelle, ainsi qu'un contrôle granulaire. Vous pouvez gérer l'intégralité du cycle de vie de vos fonctionnalités, depuis sa production et ses tests jusqu'au déploiement et à l'analyse des performances. Vous obtenez un contrôle total sur chaque fonctionnalité afin de minimiser les risques et de la lancer en toute confiance.
Vous pouvez commencer avec un essai gratuit ou profiter du plan de démarrage à 75 $/mois (limité à un membre) pour essayer ses fonctionnalités de base. Cependant, ce pack n'inclut pas les fonctionnalités d'expérimentation, pour lesquelles vous devrez passer à un plan supérieur.
AB Savoureux
AB Tasty propose des fonctionnalités d'analyse UX, d'expérimentation, de personnalisation et de gestion des indicateurs de fonctionnalités qui vous permettent d'optimiser les expériences de bout en bout sur votre application mobile. À l'aide de ceux-ci, vous pouvez créer des segments d'utilisateurs, offrir des expériences uniques à divers segments de votre base d'utilisateurs et expérimenter des fonctionnalités avant de les déployer. Vous pouvez demander un devis personnalisé à partir de leur site Web en fonction de vos utilisateurs uniques/mois et d'autres exigences.
Cible Adobe
Target est une plate-forme de test et de personnalisation de la maison Adobe. Principalement utilisé pour la personnalisation des expériences in-app à grande échelle, Target s'intègre de manière transparente à Adobe Analytics et Adobe Audience Manager. Il peut être utilisé pour optimiser vos expériences d'application en fonction de votre comportement d'utilisateur afin d'améliorer l'engagement. Cependant, Target n'offre pas de fonctionnalités de gestion des fonctionnalités, vous devrez donc peut-être opter pour un outil différent pour cela.
Test A/B Firebase
De la maison de Google Optimize, Firebase A/B Testing fournit à la fois des capacités d'expérimentation et de gestion des fonctionnalités. Comme il est proposé par Google, il s'intègre de manière transparente à tous les autres outils de Google, de sorte que la recherche de données et l'exploration d'informations pour vos campagnes ne seront pas un problème.
Conclusion
Choisir le bon outil qui correspond le mieux à vos objectifs d'expérimentation n'est que la première étape (bien qu'extrêmement cruciale) vers l'amélioration des métriques clés de votre application. Tirer parti de l'outil avec succès signifie boucler la boucle d'optimisation en investissant du temps et des efforts dans tout, de l'analyse comparative de vos KPI à la documentation de vos apprentissages et à leur réintégration dans votre feuille de route de test. Inscrivez-vous pour un essai gratuit avec VWO pour le faire facilement.
