Avis et détails du produit Statsig

Il est très flexible quant à la façon de définir les métriques - nous utilisons notre propre entrepôt de données, donc nous lui fournissons essentiellement toute la logique commerciale interne que nous avions déjà, et Statsig nous aide à suivre les métriques, à vérifier les déséquilibres et à segmenter selon nos besoins. Je l'utilise en tant qu'analyste produit chaque fois que nous expérimentons, et s'il y a une logique personnalisée complexe que nous devons exécuter sur une expérience une seule fois, il exporte même les tableaux vers notre entrepôt de données afin que nous puissions facilement explorer en SQL.

La documentation est bonne, et le personnel de service est réactif ; ils ont aidé rapidement lorsqu'il y avait des bugs à corriger ou des choses que nous ne comprenions pas. Avis collecté par et hébergé sur G2.com.

Pas grand-chose, cela peut être un peu difficile de comprendre la logique sous-jacente parfois, mais ce n'est pas la faute de la plateforme ; plutôt que les utilisateurs devraient être bons pour documenter les définitions, car Statsig vous permet d'écrire des notes/descriptions là où c'est important.

Les rares fois où j'ai personnellement eu des problèmes avec Statsig, ils les ont résolus. Avis collecté par et hébergé sur G2.com.

Statsig fait tout correctement. J'ai évalué une douzaine de plateformes d'expérimentation. Leur modèle de facturation a du sens, les deux offres (Cloud vs WHN) ont du sens, la flexibilité de traiter différentes unités comme des citoyens de première classe, la capacité à réaliser vraiment des expériences nuancées avec plusieurs métriques d'objectif. Leurs SDKs sont faciles à mettre en œuvre et performants aussi. Intégrer Statsig dans notre organisation a été sans accroc grâce à la fonctionnalité d'import/export de Snowflake. Le support est toujours rapide à répondre, et ils ont apparemment le seul (?) bot de support que j'ai vu jusqu'à présent qui est réellement utile la plupart du temps. Avant Statsig, nous ne faisions qu'une poignée d'expériences par an. Nous réalisons maintenant 4 à 5 fois plus d'expériences. Avis collecté par et hébergé sur G2.com.

Il n'y a vraiment aucun inconvénient réel à Statsig. Il est très clair que c'est une plateforme construite par des personnes qui se soucient de l'UX, de l'analyse et de l'ingénierie. Avis collecté par et hébergé sur G2.com.

L'une des choses que j'apprécie le plus à propos de cette plateforme est la facilité avec laquelle il a été possible de commencer. Dans notre entreprise, trois équipes techniques différentes (PHP, JS, mobile) l'ont intégrée dans leurs flux de travail—et à chaque fois, cela a été un processus fluide. La documentation est claire, et nous n'avons jamais rencontré de blocages frustrants lors de la configuration.

L'outil lui-même est intuitif pour les utilisateurs techniques et non techniques. Nos parties prenantes se sentent confiantes pour naviguer dans l'interface utilisateur, créer des expériences et interpréter les résultats par elles-mêmes, ce qui me libère beaucoup de temps, étant analyste dans l'équipe. La documentation, les articles de blog, les sessions enregistrées et l'Université Statsig sont d'une grande aide tout au long du processus. Ils expliquent non seulement comment utiliser la plateforme, mais approfondissent également la compréhension des meilleures pratiques d'expérimentation en général et peuvent être intéressants pour absolument tout le monde impliqué dans le développement de produits.

L'équipe de support mérite une mention spéciale. Chaque fois que nous avons contacté avec une question ou un problème, nous avons eu une réponse le jour même. Avoir un canal Slack dédié a honnêtement changé la donne, car cela rend le support plus comme un partenariat qu'une file d'attente de tickets ! Avis collecté par et hébergé sur G2.com.

La principale zone où nous avons rencontré des problèmes est l'intégration de Google Analytics (GA). Actuellement, lorsque des événements sont transférés de Statsig à GA, seul le nom de l'événement est envoyé, mais tous les paramètres d'événement supplémentaires sont perdus. Ainsi, pour quelque chose comme un événement d'achat, nous perdons tous les détails des articles, ce qui limite notre capacité à analyser pleinement le comportement des utilisateurs en dehors de Statsig.

De plus, l'intégration GA est tombée en panne deux fois cette année, et nous ne l'avons su que lorsque nous avons repéré manuellement les problèmes et contacté le support. À leur crédit, les deux problèmes ont été rapidement résolus, mais ce serait formidable d'avoir un système de surveillance ou d'alerte en place pour détecter cela plus tôt. Avis collecté par et hébergé sur G2.com.

J'utilise principalement Statsig pour les déploiements de fonctionnalités et les expérimentations A/B au quotidien. L'outil a une interface utilisateur intuitive, est facile à intégrer dans les systèmes existants et à analyser les résultats. L'analyse statistique automatique permet de comprendre et d'analyser facilement les expériences et les résultats, même pour les non-scientifiques des données. Je l'apprécie particulièrement pour sa facilité d'utilisation, sa capacité à approfondir chaque expérience, les résultats des utilisateurs et la possibilité de déboguer les connexions des utilisateurs, d'analyser les parcours des utilisateurs et l'impact de chaque fonctionnalité/déploiement sur les métriques, le tout à travers un seul outil sans avoir besoin d'une implication constante de l'ingénierie.

J'apprécie particulièrement les fonctionnalités "Pulse" et "Holdout" qui offrent une visibilité sur la façon dont les expériences impactent les métriques commerciales clés au fil du temps.

De plus, une excellente équipe de support client qui aide à résoudre les problèmes de manière rapide. Avis collecté par et hébergé sur G2.com.

L'expérience d'intégration pourrait être plus fluide pour les équipes qui ne sont pas familières avec les plateformes d'expérimentation. La terminologie et les processus de configuration nécessitent un apprentissage préalable et une expérience pratique qui, s'ils étaient améliorés, pourraient constituer une amélioration considérable. Avis collecté par et hébergé sur G2.com.

Statsig facilite l'exécution d'expériences et la gestion des drapeaux de fonctionnalités avec une configuration minimale. Les SDK sont simples, les configurations dynamiques sont flexibles, et la journalisation des événements est bien structurée. J'apprécie particulièrement la façon dont la logique d'expérimentation peut rester sur le backend et rester découplée de l'interface utilisateur, ce qui s'adapte parfaitement à notre architecture. La capacité d'évaluer les drapeaux et les variantes en temps réel à l'aide de règles de console est également incroyablement puissante. Enfin, l'équipe est réactive et ouverte aux retours, ce qui fait une réelle différence.

Très fluide. Le SDK a été facile à intégrer dans notre service backend, et la configuration initiale des portes de fonctionnalités et des configurations dynamiques a été rapide. Nous étions opérationnels avec notre première expérience en quelques heures.

Nous utilisons Statsig de manière cohérente pour la logique d'expérimentation, le contrôle du déploiement des fonctionnalités, et les mises à jour de configuration en temps réel. C'est maintenant une partie essentielle de notre flux de développement et de déploiement.

Simple. L'intégration backend (dans notre cas, .NET) était bien prise en charge. Le SDK offre une API propre, et le flux de journalisation des événements + évaluation des variantes était simple à intégrer dans nos services existants. Avis collecté par et hébergé sur G2.com.

La documentation pourrait être un peu plus approfondie dans certains domaines, notamment en ce qui concerne la configuration avancée et les modèles prêts pour la production. Nous avons également remarqué que l'interface utilisateur de la console peut sembler un peu maladroite par moments lorsqu'il s'agit de gérer un grand nombre de configurations ou de portes. Certaines limitations concernant le ciblage des segments et la flexibilité des règles nous ont obligés à créer une logique personnalisée par-dessus. Avis collecté par et hébergé sur G2.com.

Nous utilisons Statsig depuis environ un an et demi au sein de notre équipe d'expérimentation, principalement pour les tests A/B et les déploiements progressifs. L'un des plus grands avantages est la rapidité et la facilité avec lesquelles nous pouvons créer de nouveaux indicateurs. L'interface est propre et intuitive, notamment la manière dont elle affiche les intervalles de confiance, ce qui nous apporte beaucoup de clarté lors de l'interprétation des résultats des expériences. L'alerte SRM (Sample Ratio Mismatch) intégrée a également été incroyablement utile pour détecter les problèmes tôt. Avis collecté par et hébergé sur G2.com.

L'interface, bien que généralement solide, peut parfois sembler un peu rigide. Nous aimerions avoir plus de flexibilité pour configurer des expériences et personnaliser des vues ou des configurations afin de mieux correspondre à nos processus internes. Ce n'est pas un obstacle majeur, mais plus d'adaptabilité porterait vraiment la plateforme à un niveau supérieur pour nous. Avis collecté par et hébergé sur G2.com.

Statsig est incroyablement facile à utiliser et permet à notre équipe de lancer et de gérer des dizaines de tests A/B en quelques jours. L'interface utilisateur pour explorer les métriques est intuitive, et vous pouvez découper et analyser les résultats selon n'importe quelle dimension à la volée. J'adore la rapidité avec laquelle vous pouvez voir les résultats en temps réel et ajuster les analyses sans écrire de code. Les fréquentes mises à jour de fonctionnalités et les améliorations constantes du produit le maintiennent à la pointe de la technologie. De plus, l'équipe de support sur Slack est fantastique—chaque fois que j'ai une question, ils répondent immédiatement. Avis collecté par et hébergé sur G2.com.

Lorsque quelque chose se casse ou qu'une expérience ne montre pas les données attendues, il peut être difficile de déboguer et de déterminer la cause principale. Il n'y a pas de moyen facile de diffuser des événements en temps réel depuis ma machine locale, et dans la vue Explore, vous ne pouvez regrouper que par une dimension à la fois, ce qui rend l'analyse plus approfondie plus fastidieuse. L'assistant chatbot semble également un peu limité pour le moment, bien que je l'utilise souvent. Avis collecté par et hébergé sur G2.com.

Statsig est devenu l'un de mes outils préférés car il rend très facile l'exécution de tests A/B et l'obtention de résultats clairs rapidement. En plus de cela, il me fournit toutes les analyses dont j'ai besoin pour comprendre le comportement des utilisateurs et l'impact du produit sans avoir à naviguer entre différentes plateformes. Leur support client est également incroyablement réactif et serviable—ils sont intervenus rapidement chaque fois que j'ai rencontré un problème ou eu une question sur la configuration ou l'interprétation. Avis collecté par et hébergé sur G2.com.

Une chose qui a été un peu déroutante en tant que chef de produit est de comprendre quand utiliser des configurations dynamiques, des expériences ou des portes de fonctionnalités. Les frontières entre elles peuvent sembler floues, surtout lorsque vous essayez d'équilibrer les tests avec les stratégies de déploiement. Par exemple, mettre en place une expérience peut sembler simple, mais si vous utilisez également une porte de fonctionnalité pour gérer l'exposition ou une configuration dynamique pour contrôler le comportement, il n'est pas toujours clair quel outil devrait être la source de vérité. La documentation explique chacun séparément, mais en pratique, il faut un peu de tâtonnement pour comprendre comment ils s'intègrent tous dans un flux de produit réel. C'est puissant, mais pas toujours intuitif. Avis collecté par et hébergé sur G2.com.

Statsig excelle dans l'expérimentation rapide et fiable. Il rend les drapeaux de fonctionnalité, les tests A/B et la mesure d'impact faciles à exécuter à grande échelle, avec une rigueur statistique solide et un minimum de surcharge d'ingénierie. Avis collecté par et hébergé sur G2.com.

Les interfaces utilisateur et les flux de travail d'analyse peuvent sembler dogmatiques et moins flexibles pour une analyse approfondie et exploratoire, et les cas d'utilisation avancés nécessitent encore l'implication des ingénieurs. Avis collecté par et hébergé sur G2.com.

Statsig permet de comprendre des concepts statistiques complexes - signification, intervalles de confiance, etc. - en un coup d'œil. Il nous aide à prendre de meilleures décisions concernant nos expériences et à communiquer avec nos parties prenantes sur nos résultats. La fonctionnalité de porte de fonctionnalité est également assez simple et s'intègre bien avec l'interface des résultats. Avis collecté par et hébergé sur G2.com.

Les prix sont un peu élevés, mais on en a pour son argent. Avis collecté par et hébergé sur G2.com.