Amplitude ouvre Wave pour repérer les améliorations produit à partir des usages
Après sa bêta fermée, Amplitude Wave devient une offre payante. L’agent aide à choisir des modifications à tester et à en suivre les résultats.
Amplitude a ouvert Wave le 12 novembre sous forme d’offre payante pour ses clients Growth et Enterprise. Cet agent analyse les usages d’un produit pour proposer des modifications à tester. le communiqué financier du 4 novembre présentait encore Wave comme un produit en bêta fermée. Le changement du 12 novembre porte donc sur l’accès à l’offre. Les premières expériences décrites par Amplitude remontent à la phase de test.
Wave part d’un objectif produit
Une équipe commence par définir un résultat à améliorer dans un périmètre donné. Il peut s’agir de permettre aux nouveaux utilisateurs de terminer leur première action dans un logiciel. Wave examine les données disponibles et peut s’appuyer sur des enregistrements de sessions. Il cherche ensuite des situations qui méritent une enquête plus poussée.
L’agent produit une liste d’opportunités classées. le billet de lancement d’Amplitude décrit des propositions qui peuvent inclure une hypothèse et une maquette. Le plan peut aussi préciser ce qu’il faudrait mesurer pendant un essai. Le rôle de l’équipe est de décider quelles pistes correspondent à ses priorités et lesquelles justifient une modification du produit.
L’analyse peut déboucher sur une modification à tester
Les équipes peuvent transmettre une proposition à un agent de développement. Celui-ci peut s’appuyer sur les informations techniques et les critères préparés pendant l’analyse. Le niveau d’automatisation varie selon les réglages et la nature du changement. OpenAI indique que des équipes soumettent directement certains correctifs aux agents de code et gardent une validation humaine pour les modifications plus importantes. La liaison avec le travail de développement rappelle les fonctions présentées dans notre article sur les sessions cloud de GitHub Copilot.
Amplitude cite l’exemple de DigitalOcean. Le service a testé une indication plus visible de l’obligation d’ajouter un moyen de paiement lors de la création d’un serveur virtuel. Davantage d’équipes ont ajouté un moyen de paiement dans l’expérience rapportée. DigitalOcean a choisi de déployer l’indication. Ce cas décrit un essai précis chez un client de l’éditeur. Il ne donne pas de taux de réussite général pour les propositions de Wave.
Ce que les chiffres du lancement permettent de dire
Dans le retour d’expérience publié par OpenAI, OpenAI décrit les modèles utilisés par Amplitude pour plusieurs tâches. Le cas client rapporte aussi qu’un quart des expériences et changements mis en ligne par les clients l’ont été le jour où Wave a signalé l’opportunité. Le calcul porte sur les changements arrivés à cette étape. Il ne dit pas quelle part des recommandations a été rejetée et ne mesure pas l’effet moyen de toutes les propositions.
Amplitude présente un démarrage accompagné pour évaluer les données d’analyse et les enregistrements de sessions du client. Deux équipes peuvent disposer du même accès et recueillir des données de qualité différente. Si un événement produit manque, l’agent ne peut pas vérifier de la même manière ce qui se passe à cette étape. Les équipes qui utilisent des enregistrements doivent aussi vérifier quelles données sont accessibles à l’outil.
L’intérêt de Wave dépend du lien entre l’observation de départ et le résultat suivi après le changement. Une suggestion d’interface peut être mise en ligne rapidement. L’expérience permet ensuite de savoir si elle facilite effectivement le parcours et pour quels utilisateurs. Le lancement ouvre ce cycle de travail aux clients éligibles au-delà de la bêta fermée.