Témoignage : Yves Richard, expert QA et tests, sur Cerberus Testing

Antoine Craske7 min de lecture

Automatiser, oui, mais à quel prix ?

Réussir un projet d’automatisation suppose de réunir plusieurs facteurs de succès. C’est loin d’être une simple affaire d’outil réservée aux profils techniques. Une vraie collaboration et l’accompagnement des équipes font toute la différence.

Témoignage : Yves Richard, expert QA et tests, sur Cerberus Testing

Dans cet entretien, Yves Richard, expert QA et automatisation chez Ausy, partage son retour d’expérience sur Cerberus Testing. Sa vision transverse des outils et de missions variées offre un regard global et concret.

À propos de Cerberus Testing

Cerberus Testing est un framework d’automatisation des tests open source (s’ouvre dans un nouvel onglet). Disponible en codeless, il permet une collaboration transverse entre les équipes métier, développement et QA. Les tests web, mobiles, d’API, de client lourd et de base de données sont pris en charge dans un framework unifié, pour itérer rapidement entre configuration, exécution et reporting des tests.

Chiffres clés

  • Un POC réalisé en quelques heures
  • Prise en main par un profil non technique en 10 min
  • 1 300 tests exécutés plusieurs fois par jour en moins de 2 heures
  • Une note de recommandation de 15/10 ! 🙂

« Cerberus Testing m’a permis de construire une approche unifiée de l’automatisation des tests pour mes différents cas d’usage, sur une seule plateforme. »

Yves Richard

Pouvez-vous commencer par vous présenter ?

Je suis testeur depuis plusieurs années dans de grandes entreprises. Ma spécialité, ce sont les outils : leur choix, leur mise en place et le conseil, avec l’automatisation pour fil conducteur. Je travaille actuellement chez Ausy. Pour l’anecdote, je suis Nordiste d’origine, « émigré » dans le sud de la France 🙂

Quels problèmes cherchez-vous à résoudre avec Cerberus Testing ?

Le premier besoin était de donner la main aux testeurs sur l’ensemble des activités d’automatisation. Ce ne sont pas tous des profils techniques : il faut donc une solution accessible. À l’époque, Cerberus Testing a fait la différence par sa grande facilité d’utilisation. Tout se fait depuis l’interface ; en dehors de l’identification des objets, nul besoin de coder pour automatiser des tests.

Figure 1 : l’interface codeless disponible dans Cerberus Testing

Le deuxième besoin était d’accéder à une solution d’automatisation des tests dans une enveloppe budgétaire acceptable. Le prix des produits était souvent rédhibitoire pour les budgets qualité. Cerberus était disponible gratuitement, ce qui levait ce premier frein. Mieux encore, le modèle open source permet même d’y contribuer.

Le troisième besoin était de tester un large éventail d’applications et de cas d’usage. Cerberus prend en charge différentes techniques de test en web, mobile et API, et il est mis à jour en continu pour permettre l’automatisation dans des contextes variés. Ces briques à jour facilitent l’interfaçage avec des solutions externes comme la CI/CD.

Les nombreuses intégrations natives avec les plateformes de déploiement, la conteneurisation et les API apportent aussi de la souplesse dans la mise en œuvre.

Quelle était votre situation avant d’utiliser Cerberus Testing ?

J’ai commencé par les bases. Je me suis formé à Selenium avec Java. J’ai ensuite utilisé des logiciels spécifiques comme Protractor ou HP UFT, entre autres. Ces solutions demandaient des capacités de développement et d’analyse assez poussées. J’ai donc passé du temps à m’adapter à chacun de ces outils.

Je rencontrais des problèmes récurrents d’optimisation des tests. Par exemple, je devais gérer les temps d’attente d’affichage des éléments et de chargement des pages. L’effort de code et d’optimisation était donc important.

Cerberus Testing m’a permis de construire une approche unifiée de l’automatisation des tests pour mes différents cas d’usage, sur une seule plateforme. J’ai pu me concentrer sur l’essentiel : tester le produit.

Qu’est-ce qui distingue Cerberus Testing des autres outils d’automatisation de ce segment ?

Le « vrai » codeless est une réelle différence. On comprend facilement les menus et on apprend vite à naviguer. On parvient à enchaîner les étapes nécessaires à la création, à l’exécution et à l’analyse des tests. On découvre ensuite des fonctionnalités avancées, comme la bibliothèque d’objets, d’actions ou de données. Un débutant peut automatiser des tests avec succès en moins de 10 minutes.

L’utilisation des propriétés dans les cas de test est un deuxième atout. Les produits codeless manquent souvent de scalabilité dans la gestion des données : il faut généralement dupliquer ses paramètres pour chaque test. Avec Cerberus, c’est différent. Le découplage entre actions et propriétés permet de réutiliser les données d’un test à l’autre, et même de faire du data-driven testing.

Figure 2 : la variabilité des données disponible dans Cerberus Testing, documentation (s’ouvre dans un nouvel onglet).

Et l’on peut aller plus loin en faisant varier l’accès aux données, par exemple par pays ou par contexte. On peut aussi récupérer dynamiquement des jeux de données depuis des bases de données, des fichiers ou des API. Toutes ces fonctionnalités améliorent la conception des tests et les rendent plus faciles à maintenir.

Une interface et une documentation tenues à jour complètent cette facilité d’utilisation.

Autre élément qui fait la différence : on gère facilement ses campagnes de test, de la configuration à l’exécution et jusqu’au reporting. L’ajout de robots d’exécution sur des fermes locales ou distantes, en parallèle, est lui aussi natif. Autre point : la prise en charge des tests d’API en SOAP, REST, GraphQL et Kafka.

Enfin, cette accessibilité facilite la réalisation d’un POC, grâce à toute la documentation disponible en ligne, en vidéos ou en articles.

Figure 3 : la documentation de Cerberus Testing, orientée cas d’usage, en articles et en vidéos (s’ouvre dans un nouvel onglet).

J’allais oublier un point : le support ! Le Slack de la communauté est ouvert aux utilisateurs et permet d’échanger directement. La plupart du temps, j’ai obtenu une réponse dans la journée à mes différentes demandes. Cette communauté ne cesse de grandir et permet de partager nos pratiques. Au quotidien, c’est un gain de temps considérable.

Qu’avez-vous pu accomplir avec Cerberus Testing ? Avez-vous une success story ?

J’ai mis en place une suite complète de tests de non-régression qui m’a permis de sécuriser le lancement d’un projet complexe. Plusieurs personnes étaient nécessaires à la mise en place d’un nouveau système et intervenaient à plusieurs endroits.

La possibilité d’automatiser des tests de bout en bout m’a permis de sécuriser l’intégration des composants. Je pouvais en outre confier la suite aux équipes pour lancer les campagnes de test et obtenir le rapport d’exécution. Les acteurs du projet pouvaient itérer rapidement et, le cas échéant, apporter les corrections nécessaires dans les minutes qui suivaient.

Cette campagne de tests de non-régression automatisés a permis de tenir le calendrier du projet.

Figure 4 : les rapports d’exécution disponibles nativement dans Cerberus Testing.

J’ai aussi mené de l’automatisation à grande échelle dans un contexte e-commerce. C’est un classique pour les testeurs, avec les parcours clients et autres scénarios orientés utilisateur. Par exemple, nous avons automatisé plus de 1 300 tests, exécutés en moins de 2 heures.

Nous pouvions les lancer chaque matin pour obtenir un rapport d’automatisation, ainsi qu’à chaque livraison logicielle. Une automatisation réussie nous a permis de créer une valeur visible pour l’organisation.

Quelles étaient vos principales craintes avant d’utiliser Cerberus Testing, et qu’est-ce qui vous a finalement convaincu ?

Tout au début, il y a déjà 4 à 5 ans, en 2016, l’installation demandait des compétences techniques. Il fallait configurer un serveur d’applications et une base de données, puis intégrer Selenium et d’autres composants de test.

Cette charge de travail n’existe plus aujourd’hui. L’an dernier, j’ai dû faire une démo : mon instance était prête en quelques minutes pour tester en local. On peut aussi utiliser la démo en ligne à tout moment, ou demander une instance Cloud.

Quels éléments contribuent le plus à votre satisfaction et à celle de vos utilisateurs avec Cerberus Testing ?

Sa facilité d’utilisation rend l’automatisation agréable et simple. On ne perd pas de temps en considérations trop générales ni en détails de configuration. On gagne un temps précieux sur le cycle de vie des tests.

Cette simplicité d’utilisation facilite aussi la collaboration avec le métier, les développeurs, etc. Au final, des échanges plus fluides autour de livrables partagés améliorent la qualité du produit.

Enfin, la plus grande satisfaction a été l’utilité concrète des tests dans les projets. Ils m’ont permis de faire la différence sur la confiance accordée aux livraisons logicielles.

Pour quelles raisons principales recommanderiez-vous Cerberus Testing ?

La première, c’est de permettre la collaboration avec le métier. Quand on cherche à mettre en place des tests automatisés, être en contact direct avec les acteurs du produit fait toute la différence. C’est là que l’on peut automatiser en maximisant la valeur ajoutée. La facilité d’utilisation, sans barrière technique, est l’une des premières raisons.

Ensuite, le prix d’accès à l’ensemble de ces fonctionnalités. On peut accéder à la solution gratuitement, puis accélérer avec les offres disponibles. D’autres solutions codeless voient bien le jour, mais leur prix reste un vrai problème.

« Essayer Cerberus Testing, c’est l’adopter ! »

Yves Richard

Encore une fois, la disponibilité du support et la rapidité des réponses font la différence. Le produit évolue aussi en continu : interface, cas d’usage, connecteurs, reporting, etc. Un vrai investissement a été fait dans l’expérience utilisateur.

L’implication dans le produit est aussi un élément différenciant. J’ai assisté à une démonstration en direct de l’outil avec les développeurs principaux. Nous avons pu accéder à la roadmap et aux fonctionnalités en bêta, et donner notre avis. C’est très intéressant de contribuer ainsi à une solution que l’on utilise.

Sur une échelle de 0 à 10, dans quelle mesure recommanderiez-vous Cerberus Testing à vos pairs ?

15/10 ! 😊

Je l’ai déjà proposé à pas mal de collègues, j’ai fait de petites démos et montré régulièrement la valeur du produit. Le problème, c’est souvent la conduite du changement qu’implique la mise en place d’une nouvelle solution.

Je ne vois aucune raison de ne pas utiliser Cerberus Testing pour une entreprise qui veut se lancer dans l’automatisation des tests. La documentation est disponible, le support aussi. On peut également accélérer facilement avec la nouvelle offre Cloud, avec des abonnements très accessibles.

J’ai vivement recommandé Cerberus Testing à plusieurs pairs et je maintiens cette position. L’essayer, c’est l’adopter !

Commencez gratuitement sur cerberus-testing.com/start

Suivez-nous sur nos réseaux sociaux#

GitHub https://github.com/cerberustesting/cerberus-source/ (s’ouvre dans un nouvel onglet)

LinkedIn https://www.linkedin.com/company/cerberus-testing (s’ouvre dans un nouvel onglet)

Twitter @CerberusTesting https://twitter.com/CerberusTesting (s’ouvre dans un nouvel onglet)

Site web https://cerberus-testing.com/fr/

Partager

Outils de test open source

Cerberus Testing, la plateforme d’automatisation des tests tout-en-un

L’écosystème de l’automatisation des tests est en pleine évolution. Longtemps considérée comme une activité secondaire, elle n’était menée que s’il restait du temps une fois le développement terminé.

Antoine Craske4 min de lecture4 min