Évaluation des outils de test

Tout d'abord, il faut trouver un outil de test approprié pour l'exécution des tests GUI. Dans ce contexte, les exigences sont analysées dans ce qui suit pour l'évaluation des outils de test. Après avoir choisi un outil de test adéquat, il doit être introduit chez SIV.AG. Les tests doivent donc être créés, évalués et documentés.

QF-Test vs. GUIdancer

Après l'évaluation de l'analyse des exigences, deux outils de test restent des candidats possibles. Sur la base de ces exigences, une spécification et un formulaire d'évaluation ont été développés pour déterminer quel outil de test correspond aux exigences spécifiques. Les deux outils de test candidats ont été examinés de manière approfondie dans un environnement de test isolé afin de les évaluer. Le formulaire d'évaluation comporte différentes caractéristiques qui contiennent plusieurs exigences. Les caractéristiques suivantes sont importantes pour l'évaluation :

  • Facilité d'utilisation
  • Support de la plateforme
  • Détection de bogues
  • Fonctionnalité
  • Capacité à produire des rapports
  • Tests de performance et de charge
  • Contrôle des versions
  • Planification et administration
  • Tarification
  • Qualification du fournisseur
  • Documentation

Avec 83% ou 912 des 1095 points possibles, QF-Test a gagné contre GUIdancer (67% et 737 des 1095 points). Le facteur décisif de la victoire de QF-Test a été l'ensemble des fonctionnalités de QF-Test. QF-Test est facile à utiliser, ce dont la conception intuitive est responsable. De plus, les scripts de test peuvent être enregistrés très facilement et rapidement, contrairement à GUIdancer. GUIdancer n'utilise pas la méthode de capture : L'avantage est que les tests peuvent être créés pendant la phase de spécification, mais la méthode de GUIdancer prend beaucoup de temps. Un autre point crucial était que les langages de script peuvent être utilisés dans QF-Test. Pour les cas de test simples, les langages de script ne sont pas nécessaires, pour les cas de test très complexes, les langages de script peuvent être très utiles. Enfin, QF-Test a été convaincant dans la fonctionnalité, la qualification et la documentation. En ce qui concerne les exigences de qualification, c'est-à-dire la maturité et la part de marché du produit ou l'assistance au client, QF-Test a été constamment très bien classé. 

L'extrait complet du rapport d'évaluation concernant QF-Test peut être trouvé ici. (PDF en allemand).

Mémoire de maîtrise :  Examen de scénarios de test automatisables pour les interfaces utilisateur de systèmes logiciels d'entreprise, auguste 2011 - Christian Froh, Hochschule Wismar, Allemagne.

(Les textes originaux allemands et les citations sont traduits en français).