Quelles solutions de tests utilisez-vous en C++ en 2013 ?

**r0d** · 05/02/2013, 12h04

Bonjour,

J'aimerais avoir vos avis concernant les diff�rentes solutions de tests unitaires en c++.

Parmi celles que vous avez d�j� utilis�es,

quelles sont celles qui sont les plus faciles � installer, configurer (automatisation), utiliser et maintenir ?
sur quel(s) syst�me(s) d'exploitation fonctionnent-elles ?
sont-elles gratuites ?
sont-elles d�pendantes d'un IDE donn� ?
sont-elles fiables ?

**jblecanard** · 05/02/2013, 18h12

Salut !

Je n'en ai pas test� beaucoup mais j'aime bien GTest, pour les raisons suivantes:
- Facilit� d'usage.
- Facilit� de mise en place : simple et peu de d�pendances, facile � int�grer dans un projet.
- Facilit� pour rejouer un test ou set de tests donn� (�a parait trivial et pourtant ce que �a peut �tre chiant avec certains !)
- Customisation ais�e des formats de sorties avec les "listeners" qui permettent de g�n�rer des rapports sous diff�rentes formes.

Inconv�nient remarqu�: de base, GTest s'utilise en ne compilant qu'un seul ex�cutable qui fait tout. Du coup, un segfault peut te pourrir un replay de nuit par exemple car plus aucun test ne sera jou� apr�s.

Concernant tes points:
- Int�gration: GTest ne fait rien � part te donner les cl�s pour g�n�rer des rapports sous le format qui te convient. Dans mon cas je g�n�rais des TAP pour Jenkins, c'est fait en 10 lignes de code c'est bidon.
- Plateforme: A priori Windows/Mac/Linux. Test� sous linux
- Licence: New BSD
- D�pendance � un IDE: niet, s'int�gre tr�s bien dans Eclipse CDT.
- Fiabilit� : Difficile � mesurer, aucun probl�me � d�plorer pour ma part.

**poukill** · 05/02/2013, 22h43

Je vais suivre de pr�s aussi, �a m'int�resse !

**LinuxUser** · 05/02/2013, 22h46

J'ai jamais utilis�, mais on m'a tr�s fortement conseill� cppUnit
http://matthieu-brucher.developpez.c...s/cpp/cppUnit/

**Bousk** · 06/02/2013, 00h50

J'utilisais CPPUnit lors de ma pr�c�dente mission : je sais pas pour la mise en place, mais � l'utilisation c'est fort simple !

**JolyLoic** · 06/02/2013, 14h19

J'ai utilis� cppunit et boost.test, et un tout petit peu la biblioth�que livr�e dans visual studio 2012.

Je trouve cppUnit inutilement lourd, � la mise en place comme � l'utilisation (besoin d'enregistrer manuellement les cas de test, besoin de comparer des valeurs de m�me type, et pas simplement de types compatibles (par moyen de faire un test entre une std::string et un lit�ral de type char const *...)).

J'avais pr�f�r� boost::test (mieux packag�, rien � faire pour la mise en place, tests auto enregistr�e, bonne instrumentation du code (fuites m�moires, d�sactivation des asserts...)).

**Luc Hermitte** · 06/02/2013, 16h30

J'ai un souvenir de CppUnit v1 inutilement complexe � utiliser (p.ex. tests � recenser 2 fois), avec avec beaucoup de manque dans les trucs testables. Pour moi il ne doit sa bonne r�putation qu'� son nom pour ceux qui viennent de jUnit. Pour un public qui connait le C++, il y a mieux (la profusion de frameworks de TU en C++ est d'ailleurs pour moi un indice que CppUnit est un �chec alors que jUnit me semble dominer l'�cosyst�me Java)

A l'�poque j'utilisais CxxTest (.sf.net) qui reposait sur un script Perl et qui avait un vocabulaire bien plus riche. Le seul d�faut �tait li� � l'affichage de donn�es utilisateur pas toujours simple � mettre en oeuvre. Depuis le script a �t� r��crit en python et je n'ai plus eu l'occasion de l'essayer.

Depuis donc j'ai essay� boost.test. Il n'est pas inutilement lourd, il fait son job, son vocabulaire est suffisamment riche. Le format des erreurs est bon (i.e. m�me format que celui de tous les outils *nix). S'il fallait lui trouver un d�faut : le besoin de disposer du .so pour pouvoir s'en servir.
Je n'ai pas essay� google.test, il m'a l'air comparable.

Pour info j'utilise CTest pour encapsuler la gestion de tous les tests. Plein d'avantages relativement � CDash, relativement � la possibilit� de tester des r�sultats produits (stdout/fichier(s)) (bien que la macro pour faire �a est � ~~�crire~~bidouiller soi m�me, et que c'est tr�s tr�s mal document�).
Un d�faut pour moi toutefois: les lignes sont pr�fix�es par les num�ros des tests (/des threads dans le cas de la compilation), j'ai d� rajouter un hack dans ma conf vim pour pouvoir nettoyer ce parasitage.

Invit� · 07/02/2013, 13h12

Hello,

Pour ma part c'est coup de coeur pour gtest. (1.6)
Les macros sont claires, assert, expect, cest facile d'executer un test simples, ecrire un test est simple.

Cppunit, pour moi cest trop complique. Creer des classes de tests, des sources etc... brr.

Ctest jai teste aussi, de memoire cest appeler lexecutable plein de fois avec differents parametres, je trouve ca bof. Mais cest vrai qu'associe au reporting CDash, c'est sympa.

Par contre, il est possible de se servir de gtest avec une bonne vieille macro (CMakeLists) couplee a CTest (pour pouvoir beneficier de la facilite decriture de tests avec gtest+reporting propose par CDash)

**r0d** · 07/02/2013, 13h52

En effet gtest � l'air vraiment bien. De plus, j'ai vu qu'il existe d�j� quelques logiciels � priori s�rieux, se basant sur gtest, qui proposent des am�liorations int�ressantes.

Mais boost a 2 avantages qui me paraissent non n�gligeables: boost est souvent int�gr� au cycle de d�veloppement (donc �a ne rajoute pas de d�pendance suppl�mentaire), et boost inspire plus confiance (nous l'utilisons depuis longtemps).

**Luc Hermitte** · 07/02/2013, 14h43

Quels param�tres suppl�mentaires pour CTest ?

Ton TU soit tu l'appelles directement si �a te fais plaisir, soir tu l'appelles via CTest (soit juste lui, soit tous les TU, soit certains TU (identifi�s par num�ro ou regex sur le nom), au besoin).
Apr�s il y a des param�tres bien cach�es qui permettent de lancer l'ex�cution des TUs tout en calculant des taux de couverture du code, ou via valgrind.

**jblecanard** · 07/02/2013, 17h03

Envoy� par galerien69

Par contre, il est possible de se servir de gtest avec une bonne vieille macro (CMakeLists) couplee a CTest (pour pouvoir beneficier de la facilite decriture de tests avec gtest+reporting propose par CDash)

Si t'as d�j� fait �a, �a m'int�resse.

Invit� · 07/02/2013, 17h58

ici un exemple:

Code :

S�lectionner tout - Visualiser dans une fen�tre � part

1
2
3
4
5
6
7
8
9
10
11
FOREACH(GTEST_SOURCE_FILE ${GTEST_SOURCE_FILES})
  FILE(STRINGS ${GTEST_SOURCE_FILE} GTEST_NAMES REGEX ^TEST)
  FOREACH(GTEST_NAME ${GTEST_NAMES})
    STRING(REGEX REPLACE ["\) \(,"] ";" GTEST_NAME ${GTEST_NAME})
    LIST(GET GTEST_NAME 1 GTEST_GROUP_NAME)
    LIST(GET GTEST_NAME 3 GTEST_NAME)
    ADD_TEST(${GTEST_GROUP_NAME}.${GTEST_NAME}
${EXECUTABLE_OUTPUT_PATH}/${BIN_NAME}
--gtest_filter=${GTEST_GROUP_NAME}.${GTEST_NAME})
  ENDFOREACH()
ENDFOREACH()

ce qui consiste � appeler lexecutable avec en param�tre le nombre du test pars� par cette macro et ce pour chaque test.
Du coup, ya pas besoin de "r�f�rencer" la liste des tests dans le CMakeLists, c'est fait par la macro qui parse les fichiers!

J'ai plus les sources, mais je peux reconstruire un ex si n�cessaire, c'est assez imm�diat

**jblecanard** · 08/02/2013, 09h40

Ca ira je pourrais me d�brouiller avec tes r�f�rences, merci pour l'astuce !

**CleeM** · 08/02/2013, 11h00

Bonjour � tous,

Je suis compl�tement novice dans les tests unitaires, et d'un point de vue de d�butant, je peux vous dire que CppUnit n'est pas facile � mettre en place.

Je ne peux pas comparer avec beaucoup d'outils, mais j'utilise actuellement UnitTest++ qui est beaucoup plus facile � mettre en place, et est apparemment reconnu pour �tre l�ger d'utilisation.

**David Fleury** · 08/02/2013, 18h11

Bonjour,

sur tous mes projets, pro et perso, j'utilise un fork maison de cpp unit lite, tr�s simple � utiliser.

**ketan** · 11/02/2013, 10h48

Bonjour,

Personnellement, avant j'utilisais WinUnit (http://winunit.codeplex.com/) puisque c'�tait le r�sultat qui sortait le plus souvent dans mes recherches google.

Depuis que j'ai vu ce topic, je me lance dans l'utilisation de GTest.

**alex.buisson** · 11/02/2013, 10h50

Yet Another Framework for Unit-Testing : http://members.home.nl/rutger.van.beusekom/

Tr�s simple � mettre en place et � utiliser .....

**germinolegrand** · 11/02/2013, 11h32

A vot� : Aucune, je ne fais pas de tests unitaires.

**guillaume07** · 11/02/2013, 13h31

je conseil Boost.test, dans ma boite on a test� google test cppunit et on a adopt� boost.test. Sous visual en cr�er un petit plugin il est possible de ne lancer qu'un seul test au lieu de tous, tr�s pratique .