Come comprimo i file sul posto?

Ho una macchina con il 90% di utilizzo del disco rigido. Voglio comprimere i suoi oltre 500 file di registro in un nuovo file più piccolo. Tuttavia, il disco rigido è troppo piccolo per conservare sia i file originali che quelli compressi.

Quindi quello che mi serve è comprimere tutti i file di registro in un singolo nuovo file uno per uno, eliminando ogni originale una volta compresso.

Come posso farlo in Linux?

gzipo bzip2comprimerà il file e rimuoverà automaticamente quello non compresso (questo è il loro comportamento predefinito).

Tuttavia, tieni presente che durante il processo di compressione, entrambi i file esistono.

Se si desidera comprimere i file di registro (ad esempio: file contenenti testo), è possibile preferire bzip2, poiché ha un rapporto migliore per i file di testo.

bzip2 -9 myfile       # will produce myfile.bz2

Confronto ed esempi:

$ ls -l myfile
-rw-rw-r-- 1 apaul apaul 585999 29 april 10:09 myfile

$ bzip2 -9 myfile

$ ls -l myfile*
-rw-rw-r-- 1 apaul apaul 115780 29 april 10:09 myfile.bz2

$ bunzip2 myfile.bz2

$ gzip -9 myfile

$ ls -l myfile*
-rw-rw-r-- 1 apaul apaul 146234 29 april 10:09 myfile.gz

AGGIORNAMENTO come @Jjoao mi ha detto in un commento, interessante, xzsembra avere il miglior rapporto su file semplici con le sue opzioni predefinite:

$ xz -9 myfile

$ ls -l myfile*
-rw-rw-r-- 1 apaul apaul 109384 29 april 10:09 myfile.xz

Per ulteriori informazioni, ecco un benchmark interessante per diversi strumenti: http://binfalse.de/2011/04/04/comparison-of-compression/

Per l'esempio sopra, utilizzo -9per un miglior rapporto di compressione, ma se il tempo necessario per comprimere i dati è più importante del rapporto, è meglio non utilizzarlo (utilizzare un'opzione inferiore, cioè -1o qualcosa tra).

Ho trovato una soluzione di catrame da solo.
Elimina il singolo file dopo averlo compresso nel file di destinazione.
Tuttavia, la velocità di compressione non è abbastanza elevata. Il comando ha il seguente aspetto:

tar -zcvf my_log.tar.gz *.log --remove-files

A complemento di @apaul, sottolineo che comprimere i file singolarmente

 bzip2 *.log.*

(sostituisci bzip2 con gzip, xz o qualunque sia il tuo file zip preferito) può essere importante:

In questo modo puoi ancora vedere ( bzcat file.bz2), cercare ( bzgrep file.bz2), modificare ( vi file.bz2) il file compresso e rimuovere quelli più vecchi quando necessario.

Stavo provando a farlo sulla versione BSD di tar. In questo caso, l'opzione --remove-files non è disponibile. Quello che ho finito per fare (e lavorare) è stato:

find folder_to_tar -type f -exec tar --append --file=output_tar_file.tar {} \; -exec rm -v {} \;