Unix & Linux split

8

Dividi il file di testo in righe con un numero fisso di parole

Risposte correlate, ma non soddisfacenti: come posso dividere un grande file di testo in blocchi di circa 500 parole? Sto cercando di prendere un file di testo ( http://mattmahoney.net/dc/text8.zip ) con> 10 ^ 7 parole tutte in una riga e dividerlo in righe con N parole ciascuna. Il mio approccio …

11 text-processing sed awk split

7

Dividere l'albero delle directory di grandi dimensioni in blocchi di dimensioni specificate?

Ho un albero di directory di cui vorrei eseguire il backup su dischi ottici. Sfortunatamente, supera le dimensioni di qualsiasi disco (è di circa 60 GB). Sto cercando una sceneggiatura che divida questo albero in blocchi di dimensioni adeguate con collegamenti rigidi o quant'altro (lasciando intatto l'originale). Potrei quindi inserire …

11 backup disk-usage split burning

4

Creazione di un singolo flusso di output su tre altri flussi prodotti in parallelo

Ho tre tipi di dati che sono in diversi formati; per ogni tipo di dati, esiste uno script Python che lo trasforma in un unico formato unificato. Questo script Python è lento e associato alla CPU (a un singolo core su una macchina multi-core), quindi voglio eseguirne tre istanze - …

10 text-processing pipe split parallelism

1

Stima del file non compresso errata?

Ho avuto un file compresso di grandi dimensioni (~ 60G) ( tar.gz). Lo splitdividevo in 4 parti e poi catli univo di nuovo. Tuttavia, ora, quando sto provando a stimare la dimensione del file non compresso, si scopre che è più piccolo dell'originale? Com'è possibile? $ gzip -l myfile.tar.gz compressed …

9 compression gzip split

7

Come suddividere in modo efficiente un file di testo di grandi dimensioni senza dividere i record multilinea?

Ho un grosso file di testo (~ 50Gb quando gz'ed). Il file contiene 4*Nrighe o Nrecord; cioè ogni record è composto da 4 righe. Vorrei dividere questo file in 4 file più piccoli, ognuno dei quali misura circa il 25% del file di input. Come posso dividere il file al …

9 text-processing sed awk split wc

4

Usare GNU in parallelo con Split

Sto caricando un file piuttosto gigantesco in un database postgresql. Per fare ciò uso prima splitnel file per ottenere file più piccoli (30 Gb ciascuno) e quindi carico ogni file più piccolo nel database usando GNU Parallele psql copy. Il problema è che sono necessarie circa 7 ore per dividere …

9 files split gnu-parallel

4

Dividi singola stringa in una matrice di caratteri usando SOLO bash

Voglio dividere 'hello'in h e l l oun array usando solo bash, potrei farlo in sed con sed 's/./& /g'ma voglio sapere come dividere una stringa in un array in Bash quando non so quale sarebbe il delimitatore, o il delimitatore è qualsiasi personaggio unico. Non credo di poter usare …

9 bash string split

4

Divisione del file per ogni 10000 numeri (non righe)

Ho un file simile al seguente: chr19 61336212 + 0 0 CG CGT chr19 61336213 - 0 0 CG CGG chr19 61336218 + 0 0 CG CGG chr19 61336219 - 0 0 CG CGC chr19 61336268 + 0 0 CG CGG chr19 61336269 - 0 0 CG CGA chr19 61336402 …

8 text-processing awk split

6

Dividi file di grandi dimensioni in blocchi senza dividere la voce

8 text-processing split

1

K3b per dividere il volume tra i media

Come posso fare in modo che K3b divida un volume su più supporti? Ad esempio se gli do una cartella che ha 6 GB (non un file di 6 GB), dovrebbe creare automaticamente diversi dischi di 4,4 GB, invece di farlo manualmente? Se K3B non può farlo, c'è qualche software …

8 iso split mkisofs

Domande taggate «split»