Come si imposta la dimensione del blocco bzip2 quando si utilizza tar?

Sto usando tarper il backup di un server Linux su nastro. Sto usando l' -jopzione per comprimere il file bzip2, tuttavia non riesco a vedere un modo per regolare le opzioni di dimensione del blocco per bzip2 da tar. La dimensione del blocco predefinita è 900.000 byte, che offre la migliore compressione ma è la più lenta. Non mi preoccupo molto del rapporto di compressione, quindi sto cercando di far funzionare bzip2 più velocemente con blocchi di dimensioni inferiori.

export BZIP=--fast
tar cjf foo.tar.bz2 foo

O convoglia l'output di tara bzip2.

Tuttavia, dovresti notare dalla pagina man di bzip2:

    Da -1 (o --fast) a -9 (o --best)
              Impostare la dimensione del blocco su 100 k, 200 k .. 900 k durante la compressione.
              Non ha alcun effetto durante la decompressione. Vedi GESTIONE DELLA MEMORIA di seguito.
              Gli alias --fast e --best sono principalmente per GNU gzip compat-
              bilità. In particolare, --fast non rende le cose significative
              decisamente più veloce. E --best seleziona semplicemente il comportamento predefinito.

tar -cjf dir.tar.bz2 --options bzip2:compression-level=9 path/to/dir/

bzip2 dimensioni del blocco

bzip2ha alcune opzioni per la dimensione del blocco. Dalla pagina del manuale bzip2(1):

-1 (or --fast) to -9 (or --best)
       Set the block size to 100 k, 200 k ..  900 k when compressing.
       Has no effect when decompressing. See MEMORY MANAGEMENT below.
       The --fast and --best aliases are primarily for GNU gzip
       compatibility. In particular, --fast doesn't make things
       significantly faster. And --best merely selects the default
       behaviour.

Poiché desideri una compressione più rapida con meno rispetto al rapporto di compressione, utilizzando bzip2, sembra che tu voglia l' opzione -1(o --fast).

Impostazione della bzip2dimensione del blocco durante l'utilizzotar

È possibile impostare la bzip2dimensione del blocco quando si utilizza tarin un paio di modi.

Il modo UNlX

Il mio modo preferito, il modo UNlX, è quello in cui usi tutti gli strumenti in modo indipendente e li combini attraverso i tubi.

$ tar --create [FILE...] | bzip2 -1 > [ARCHIVE].tar.bz2

Puoi leggerlo come "crea .tar con tar-> decomprimilo con bzip2-> scrivilo su [ARCHIVE].tar.bz2".

Variabile d'ambiente

È anche possibile impostare bzip2opzioni tramite la variabile di ambiente BZIP2. Dalla pagina del manuale bzip2(1):

bzip2 will read arguments from the environment variables BZIP2 and BZIP,
in that order, and will process them before any arguments read from the
command line. This gives a convenient way to supply default arguments.

Quindi, per usarlo con tar, potresti ad esempio fare:

$ BZIP2=-1 tar --create --bzip2 --file [ARCHIVE].tar.bz2 [FILE...]

Alternative più veloci

bzip2utilizza un algoritmo di compressione lenta. Se sei preoccupato per la velocità, potresti studiare algoritmi alternativi, come quelli usati da gzipo lzop. Ecco un bell'articolo che confronta gli strumenti di compressione: https://aliver.wordpress.com/2010/06/22/huge-unix-file-compresser-shootout-with-tons-of-datagraphs/

Invia l' taroutput a stdoute quindi esegui il pipe bzip2separatamente:

% tar cvf - _file_ | bzip2 _opts_ > output.tar.bz2

È ancora più semplice:

% tar -cvf dir.tar path/to/dir/ && bzip2 -9 dir.tar