Skript testující progtestový projekt, možnost automaticky otestovat -fsanitize=address i valgrind.
progtest-tester <project directory> [-v|--valgrind] [-a|--address] [-h|--help] [-i|--interactive] [-t|--test <testnum>] [-s|--sort] [-l|--linesort]
Tento skript očekává jako první argument složku, obsahující progtestový projekt, tedy soubor main.c nebo main.cpp. Dále musí obsahovat složku tests s progtestovými testy. (Tedy soubory cislo_in.txt a cislo_out.txt)
By default, tento skript projede všechny testy a reportne neproházející.
Pomocí -t test skript spustí jenom jeden test a vypíše detaily testu
-i spustí program v interaktivním režimu - bez testů
-a zkompiluje projekt s -fsanitize=address
-v spustí program pomocí valgrind
-h vypíše help
Některé programy nemusí mít na řádek stejný vstup, jako např. program Letová kontrola, kde vstupy
Alpha - Beta
Gamma - Delta
je ekvivalentní
Beta - Alpha
Delta - Gamma
To ale diff nechápe
Vlajky -s a -l různě manipulují výstupem, aby ho diff mohl zkontrolovat
-s seřadí řádky očekávaného výstupu i výstupu programu. Efektivně na oboje provede | sort
Tudíž je vhodný na programy, kde jednotlivé řádky musí být stejné, ale mohou být v jiném pořadí
-l seřadí celý očekávaný výstup i výstup programu na jeden řádek.
Například z
Asdfg
po.lk
zzzzzzzz
se stane
.Adfglopzzzzzzz
Vlajka je tedy vhodná, když slova na každém řádku musí být stejná, ale mohou být v jiném pořadí. Toto pořadí se totiž ztratí a zůstane jenom dlouhý string s všemy písmeny výstupů
Vlajka -l je zvláště náchylná na false positive! Např. výstup 2.14 je podle -l roven 4.12
Autor není zodpovědný za jakékoli škody způsobené používáním skriptu, obsahující ale ne limitující se na: špatně vyhodnocené testy, 0 z progtestu, vymazání celého disku nebo početí 3. světové války