Comment gérez-vous les données de test pour que les tests restent fiables d'une exécution et d'un environnement à l'autre ?

Faites en sorte que chaque test crée les données dont il a besoin et nettoie ensuite, avec des identifiants uniques pour que les exécutions parallèles ne se percutent pas. Préférez construire les données via l'API ou des fabriques plutôt qu'une base partagée pré-remplie, puisque les jeux de données partagés pourrissent et créent un couplage caché entre les tests. Ne dépendez jamais de données chargées manuellement, et ne vous appuyez jamais sur des données de production non anonymisées contenant des informations personnelles.

L'objectif, c'est que n'importe quel test puisse tourner seul, dans n'importe quel ordre, en parallèle des autres, et passer quand même. Cela exclut un jeu de données partagé pré-rempli, qui démarre toujours bien rangé et devient un marécage en deux mois parce que personne ne sait quel test dépend de quelle ligne. Chaque test construit donc ce dont il a besoin, idéalement par des appels d'API ou une fabrique plutôt que par l'interface, ce qui est plus rapide et bien moins fragile. Chaque enregistrement reçoit un identifiant unique, en général un identifiant d'exécution plus un horodatage dans l'adresse e-mail ou le nom, pour que dix workers parallèles ne se disputent pas le même compte. Le nettoyage se fait en fin de test, mais je conçois pour que des données résiduelles soient inoffensives plutôt que de supposer que le nettoyage tourne toujours, parce qu'il ne tournera pas quand un test plantera. Il y a donc aussi une tâche planifiée qui supprime tout ce qui a plus d'un jour et correspond au motif de nommage des tests. Sur les données de production, je m'oppose fermement aux copies non anonymisées. Si nous avons besoin d'un volume et d'une forme réalistes, je veux qu'ils soient générés ou correctement anonymisés, parce qu'un environnement de test rempli de vrais dossiers clients est une fuite en préparation et a en général des contrôles d'accès plus faibles que la production.