L’histoire de Cerberus Testing, de La Redoute à l’open source

Antoine Craske5 min de lecture

Les tests logiciels suscitent un intérêt croissant, en tant que levier clé de la digitalisation des entreprises. Le dernier World Quality Report 2019-2020 place leur contribution aux objectifs et à la croissance de l’entreprise au 1er rang des bénéfices.

Sur cette page6
L’histoire de Cerberus Testing, de La Redoute à l’open source

Pourtant, le secteur du test logiciel fait toujours état de difficultés majeures liées à la maintenance des tests, à l’automatisation, à l’outillage et aux compétences. L’outillage est soit absent, soit trop complexe à intégrer, et n’offre ni assez d’intelligence ni assez de facilité d’utilisation. Dans cet article, nous présentons Cerberus Testing, une solution d’automatisation des tests construite au sein d’acteurs du retail au fil de leur digitalisation, avec un accent particulier sur l’ergonomie, la scalabilité et l’intégration du cycle de vie des tests.

Figure 1 : Cerberus au service du cycle de vie des tests pour accélérer les boucles de feedback

Les premières lignes de code en 2010, pour explorer une solution#

Les premières lignes de code ont été écrites en 2010 chez La Redoute, acteur français de la vente de mode. L’objectif était d’automatiser les tests de non-régression manuels des applications web existantes, pour accélérer la livraison logicielle et en améliorer la qualité. À l’époque, les solutions existantes étaient surtout commerciales et cherchaient à couvrir des silos précis, comme le référentiel de tests, l’exécution ou l’analyse. C’est pourquoi la décision a été prise de lancer une solution interne, pour itérer entre gestion des tests, exécution et reporting en quelques minutes au lieu de plusieurs semaines.

Cerberus devient le nom officiel et son usage s’étend#

Cerberus est officiellement né après avoir détecté avec succès des défauts dangereux avant une mise en production ! Le premier incrément produit a permis de réaliser les premiers tests fonctionnels automatisés d’une solution CRM interne. Une exigence clé était de limiter le code, pour l’ergonomie, la réutilisation et la simplicité des tests. Il reposait sur Selenium WebDriver et une architecture trois tiers classique, sur une stack technique Java. Le nom a été retenu pour sa référence au gardien des Enfers (s’ouvre dans un nouvel onglet) de la mythologie grecque : il réunit les trois silos du test et permet les tests web, d’API et de base de données.

Le passage à l’open source en 2013#

Entre-temps, Cerberus a commencé à être utilisé pour tester la plateforme e-commerce. En échangeant au sein du secteur, nous avons constaté que nos pairs peinaient toujours dans leurs efforts d’automatisation des tests. Nous avons franchi le pas en 2013, convaincus de la valeur de l’open source pour l’innovation et le développement produit. Cerberus a été publié sur Sourceforge (s’ouvre dans un nouvel onglet) et GitHub (s’ouvre dans un nouvel onglet) sous licence GNU General Public License, ce qui a permis un premier partage au sein de notre communauté locale. Conscients des limites des projets open source, nous travaillons en continu la qualité du code, la documentation et le partage via la plateforme.

Figure 2 : le dépôt GitHub de Cerberus, avec plus de 6 000 commits, 100 étoiles et 29 contributeurs

Au cours de cette période, des transformations numériques exigeantes étaient en cours et imposaient de garantir une automatisation complète des tests de non-régression ainsi qu’une supervision. Nous nous sommes attachés à améliorer la souplesse de la gestion des tests, la scalabilité de l’exécution et la traçabilité pour atteindre ces objectifs. La possibilité de mettre en place des tests de bout en bout en plus des tests fonctionnels a été un atout majeur pendant cette période. Chez certains acteurs, elle a permis d’accélérer plus de 10 fois le cycle de livraison logicielle. Pour en savoir plus, lisez l’étude de cas de La Redoute (s’ouvre dans un nouvel onglet) : 96 % de déploiements quotidiens et plus de 6 000 tests automatisés.

Une adoption progressive par les acteurs du retail pour résoudre des problèmes communs#

Des acteurs du retail de la même zone géographique ont commencé à s’y intéresser : Decathlon, Norauto, Leroy Merlin, Midas. Grâce à la communauté de testeurs naissante, Cerberus a commencé à être partagé au-delà de ses murs d’origine. Ces entreprises ont utilisé la solution pour accélérer leur transformation numérique, principalement celle de leur e-commerce et de leur back-office.

Figure 3 : Cerberus au service de la transformation numérique grâce à l’automatisation des tests et aux intégrations

C’est à cette période que Cerberus a ajouté des intégrations standard pour élargir son usage. Le plugin Jenkins a joué un rôle clé pour faciliter le déploiement de pipelines CI/CD intégrant automatisation des tests et feedback. La prise en charge des API REST, la planification avancée, les relances et les captures d’écran ont, ensemble, permis de réduire la durée du cycle de test. Leroy Merlin s’appuie sur Cerberus pour ses tests mobiles à grande échelle : pour en savoir plus, lisez leur article « On a construit une plateforme de test mobile » (s’ouvre dans un nouvel onglet).

Cerberus couvre les principaux cas d’usage des tests continus#

Grâce aux mises à jour récentes et en cours, vous pouvez utiliser Cerberus pour de nombreux cas d’usage, du développement à l’exploitation. Vous pouvez étendre la couverture de test de votre expérience numérique en exécutant les tests sur une grande variété de navigateurs, d’appareils et d’applications. Les connecteurs natifs pour les API (SOAP, REST), les applications de bureau (client lourd) et Apache Kafka® (s’ouvre dans un nouvel onglet) couvrent de nombreux cas d’usage : applications historiques (legacy), API, microservices orientés événements, streaming, BI et data science.

Tout au long du cycle de développement logiciel, Cerberus permet des itérations rapides entre gestion des tests, exécution et reporting. Vous accélérez grâce aux spécifications de test rédigées en langage courant, à la composition des tests via une bibliothèque, à l’exécution parallèle sur différents appareils et à un reporting avancé. L’intégration native aux solutions CI/CD (Jenkins, Bitbucket (s’ouvre dans un nouvel onglet), …), combinée à l’ouverture en un clic dans des outils de ticketing comme JIRA, permet de résoudre les bugs plus vite et plus facilement.

Figure 4 : Cerberus couvre de nombreux cas d’usage de la livraison logicielle et du cycle de test

Pour boucler la boucle, vous pouvez utiliser Cerberus pour superviser votre expérience client et vos opérations métier. Les tests exécutés peuvent être fonctionnels et techniques, ce qui permet de tester des scénarios complexes. TF1, première chaîne de télévision en France, l’utilise pour l’assurance qualité de sa plateforme de streaming. La planification avancée, les alertes et les notifications vous laissent du temps pour vous concentrer sur des activités plus importantes. Des tableaux de bord de performance web et d’analyse sont également disponibles pour identifier les goulots d’étranglement liés aux intégrations tierces, ou les limites propres à l’expérience client.

Aujourd’hui et au-delà : poursuivre l’expansion#

Animer et faire grandir la communauté est une priorité pour nous. Nous sommes convaincus que le travail en réseau peut accélérer l’adoption et le développement du produit. Nous organisons des réunions communautaires toutes les 2 semaines pour aligner la roadmap et les améliorations du produit, en conciliant notre vision produit et les besoins de la communauté. Faire évoluer nos intégrations et notre ergonomie est pour nous un levier clé d’une expérience produit réussie.

Vous pouvez accéder librement à Cerberus sur GitHub (s’ouvre dans un nouvel onglet), nous suivre pour ne rien manquer des nouveautés, échanger sur les réseaux sociaux (s’ouvre dans un nouvel onglet) ou sur le Slack (s’ouvre dans un nouvel onglet) de la communauté, et lui attribuer une étoile sur GitHub si vous l’appréciez !

Découvrez ce qu’est devenu Cerberus : une plateforme de tests automatisés open source.

Partager

Outils de test open source

Cerberus Testing, la plateforme d’automatisation des tests tout-en-un

L’écosystème de l’automatisation des tests est en pleine évolution. Longtemps considérée comme une activité secondaire, elle n’était menée que s’il restait du temps une fois le développement terminé.

Antoine Craske4 min de lecture4 min