Outil de compression Zstandard (Zstd)

Zstandard compresse généralement 20-30% mieux que gzip à la même vitesse, et compresse 3-5x plus vite que Brotli à des taux de compression similaires. Au niveau 3 (par défaut), Zstd égale ou surpasse la compression gzip niveau 9 tout en étant significativement plus rapide. Brotli produit une sortie légèrement plus petite que Zstd aux niveaux maximum mais est beaucoup plus lent à compresser, ce qui le rend mieux adapté aux actifs statiques qui sont compressés une fois et servis plusieurs fois.

Le niveau 3 (par défaut) est optimal pour la plupart des cas d'utilisation — il offre un excellent équilibre entre vitesse et taux de compression. Les niveaux 1-4 sont les meilleurs pour la compression en temps réel où la vitesse est importante (streaming, journalisation, transfert réseau). Les niveaux 5-15 conviennent au traitement par lots et à l'archivage où vous pouvez échanger de la vitesse contre des fichiers plus petits. Les niveaux 16-22 offrent des améliorations marginales de taille à des vitesses significativement plus lentes et sont principalement utiles pour l'archivage unique de données qui seront décompressées plusieurs fois.

La compression par dictionnaire est une fonctionnalité de Zstd où vous entraînez un dictionnaire de compression sur des données d'échantillon, puis l'utilisez pour compresser des données similaires plus efficacement. Ceci est particulièrement efficace pour les petites charges utiles (moins de 1 Ko) où la compression standard n'a pas assez de contexte pour trouver des motifs. Facebook a développé cela pour compresser de petites réponses d'API JSON, où la compression par dictionnaire peut atteindre des ratios 2-5x meilleurs que la compression standard. Le dictionnaire doit être disponible pour la compression et la décompression.

Zstandard est largement adopté dans l'industrie technologique. Facebook l'utilise pour compresser les données d'entrepôt et la messagerie en temps réel. Le noyau Linux l'utilise pour la compression initramfs et firmware. Les gestionnaires de paquets comme apt (Debian/Ubuntu) prennent en charge les paquets .zst. Les bases de données comme MySQL et PostgreSQL prennent en charge Zstd pour la compression des sauvegardes. Les plateformes de jeux l'utilisent pour la livraison d'actifs. AWS, Google Cloud et Azure prennent tous en charge Zstd dans leurs services de stockage et CDN.

Oui, Zstd est de plus en plus pris en charge pour le codage de contenu HTTP (Content-Encoding: zstd). Chrome 123+ et Firefox 126+ prennent en charge Zstd pour les réponses HTTP. Pour les actifs Web, Zstd au niveau 19 produit des fichiers comparables à Brotli niveau 11 mais compresse plus rapidement. Cependant, comme Brotli bénéficie actuellement d'une prise en charge plus large des navigateurs, de nombreux sites utilisent Brotli pour les actifs statiques et réservent Zstd pour la communication serveur à serveur, les réponses d'API et la compression d'origine CDN où les deux points de terminaison le prennent en charge.