Les performances des différents outils de compression sous GNU/Linux

Intro

Vu qu'il y en a un grand nombre disponible, je voulais savoir quels étaient les meilleurs outils pour la compression et decompression sous GNU/Linux. Pour ce faire j'ai effectué différents tests en condition réélles en vu de voir les principales différences en terme de performance.

Environment de test

• Pour mes tests j'ai créé six dossiers différents avec les caractéristiques suivantes :
  • AUDIO : 101MB, sept fichiers mp3 et sept fichiers ogg
  • IMG : 102MB, 17 fichiers jpg
  • PDF : 102MB, 68 fichiers pdf
  • RANDOM TXT : 95MB, un gros fichier texte, créé à partir de la commande base64 /dev/urandom | head -c 100000000 > file.txt.
  • MAN TXT : 7.2MB, 870 fichiers man
  • VIDEOS : 290MB, deux fichiers mp4, un fichier mpeg et un fichier webm

Les Outils

7zip

• Compression : oui
• Archive : oui
• Sortie initiale : 1999
• Divers : ne conserve pas les permissions d'accès

Compression

• Ajout d'un fichier/répertoire à l'archive :

user@SOURCE:~$ 7z a DEST.7z SOURCE

Décompression

• Extraire avec le chemin complet :

user@SOURCE:~$ 7z x DEST.7z

bzip2

• Compression : oui
• Archivage : non
• Sortie initiale : 1996

Compression

• Compression de FILE en FILE.bz2, supprime FILE (-k pour le conserver) :

user@SOURCE:~$ bzip2 -z FILE

• Même chose mais conserve FILE :

user@SOURCE:~$ bzip2 -c FILE > FILE.bz2

Décompression

• Décompression de FILE.bz2 en FILE et supprime FILE.bz2 :

user@SOURCE:~$ bzip2 -d FILE

LZ4

• Compression : oui
• Archivage : non
• Sortie initiale : 2011

Compression File

• Compression de FILE vers FILE.lz4 :

user@SOURCE:~$ lz4 -z FILE FILE.lz4

Décompression

• Décompression de FILE.lz4 en FILE :

user@SOURCE:~$ lz4 -d FILE.lz4

gzip

• Compression : oui
• Archivage : non
• Sortie initiale : 1992

Compression

• Compression de FILE en FILE.gz et supprime FILE (-k pour le conserver) :

user@SOURCE:~$ gzip FILE

• Même chose mais conserve FILE :

user@SOURCE:~$ gzip -c FILE > FILE.gz

Décompression

• Décompression de FILE.gz en FILE :

user@SOURCE:~$ gzip -d FILE.gz

xz

• Compression : oui
• Archivage : non

Compression

• Compression de FILE en FILE.xz et suppression de FILE (-k pour le conserver) :

user@SOURCE:~$ xz -z FILE

• Même chose mais conserve FILE :

user@SOURCE:~$ xz -c FILE > FILE.gz

Décompression

• Décompression de FILE.xz en FILE :

user@SOURCE:~$ xz -d FILE.xz

zip

• Compression : oui
• Archivage : oui
• Sortie initiale : 1989
• Divers : ne conserve pas les permissions d'accès

Compression

• Compresse le fichier vers l'archive :

user@SOURCE:~$ zip FILE.zip FILE

• Compresse le répertoire vers l'archive :

user@SOURCE:~$ zip -r DIR.zip DIR

Décompression

• Décompression de FILE.zip :

user@SOURCE:~$ unzip FILE.zip

zstd

• Compression : oui
• Archivage : non
• Sortie initiale : 2015

Compression

• Compression de FILE en FILE.zstd :

user@SOURCE:~$ zstd -z FILE

Décompression

• Décompression de FILE.zst en FILE :

user@SOURCE:~$ zstd -d FILE.zst

Résultats des tests

Commande utilisée

La commande suivante permet de mesurer la taille des éléments avant et après compression, et également de connaitre le temps d'exécution.

user@SOURCE:~$ echo "BEFORE : $(du -sh "AUDIO")"; time ( tar --gzip -cvf "AUDIO".tar.gz "AUDIO" ); echo "AFTER : $(du -sh "AUDIO".tar.gz)"

BEFORE : 101M	AUDIO
AUDIO/
AUDIO/The_Dolphins_-_Demo_-_Easy_Way.mp3
AUDIO/The_Dolphins_-_Demo_-_Easy_Way.ogg
AUDIO/The_Dolphins_-_Demo_-_Illusions_And_Witnesses.mp3
AUDIO/The_Dolphins_-_Demo_-_Illusions_And_Witnesses.ogg
AUDIO/The_Dolphins_-_Demo_-_Impro.mp3
AUDIO/The_Dolphins_-_Demo_-_Impro.ogg
AUDIO/The_Dolphins_-_Demo_-_Insubstantial_As_Me.mp3
AUDIO/The_Dolphins_-_Demo_-_Something.ogg
AUDIO/The_Dolphins_-_Demo_-_The_Elements_Of_A_State.mp3
AUDIO/The_Dolphins_-_Demo_-_The_Elements_Of_A_State.ogg
AUDIO/The_Dolphins_-_Demo_-_The_Wisp.mp3
AUDIO/The_Dolphins_-_Demo_-_The_Wisp.ogg
AUDIO/The_Dolphins_-_Demo_-_Unnecessary_Evil.mp3
AUDIO/The_Dolphins_-_Demo_-_Unnecessary_Evil.ogg

real	0m3,390s
user	0m3,294s
sys	0m0,167s
AFTER : 101M	AUDIO.tar.gz

Tableau Récapitulatif