Come cancello le prime n righe di un file ASCII usando i comandi di shell?

Ho più file che contengono informazioni di testo ASCII nelle prime 5-10 righe, seguite da informazioni di matrice ben tabulate. In uno script di shell, desidero rimuovere queste prime righe di testo in modo da poter utilizzare le informazioni di matrice pura in un altro programma. Come posso usare i comandi della shell bash per fare questo?

Se è di aiuto, sto usando RedHat e un sistema Ubuntu Linux.

Finché il file non è un collegamento simbolico o hardlink, è possibile utilizzare sed, tail o awk. Esempio sotto.

$ cat t.txt
12
34
56
78
90

sed

$ sed -e '1,3d' < t.txt
78
90

È inoltre possibile utilizzare sed sul posto senza un file temporaneo: sed -i -e 1,3d yourfile. Ciò non farà eco, modificherà semplicemente il file sul posto. Se non è necessario reindirizzare il risultato a un altro comando, questo è più semplice.

coda

$ tail -n +4 t.txt
78
90

awk

$ awk 'NR > 3 { print }' < t.txt
78
90

sed -i '1,3d' file.txt

Questo elimina le prime 3 righe da file.txt.

Se le righe tabulate sono quelle che hanno un carattere tab:

grep '␉' <input_file >output_file

( ␉essendo un carattere di tabulazione letterale) o equivalentemente

sed -n '/␉/p' <input_file >output_file

In uno script bash / ksh / zsh, puoi scrivere $'\t'per una scheda, ad esempio grep $'\t'o sed -n $'/\t/p'.

Se si desidera eliminare 10 righe all'inizio del file:

tail -n +11 <input_file >output_file

(nota che è +11per eliminare 10 righe, perché +11significa "inizia dalla riga 11" e le righe dei numeri di coda da 1) o

sed '1,10d' <input_file >output_file

Su Linux, puoi sfruttare l' -iopzione di GNU sed per modificare i file in atto:

sed -i -n '/\t/p' *.txt

Oppure puoi usare un loop di shell e file temporanei:

for x in *.txt; do
  tail -n +11 <"$x" >"$x.tmp"
  mv "$x.tmp" "$x"
done

O se non vuoi modificare i file in atto, ma invece dai loro un nome diverso:

for x in *.txt; do
  tail -n +11 <"$x" >"${x%.txt}.data"
done

Puoi usare Vim in modalità Ex:

ex -sc '1d5|x' file

1. 1 passa alla prima riga

2. 5 seleziona 5 righe

3. d Elimina

4. x salva e chiudi

echo "a \ nb" | sed '1d' # cancella la prima riga

cat list.txt | sed '1d'> list.csv # leggi list.txt e scrivi list.csv senza la prima riga

Altri comandi utili:

grep '^ |' # trova il primo carattere (pipe |)

sed 's / | // g' # elimina pipe

sed 's / // g' # cancella lo spazio

In percentuale

Utilizzo bash, per ripulire un file utilizzando un numero percentuale anziché un numero assoluto di righe:

sed -i -e 1,$( printf  "$((`cat php_errors.log | wc -l` * 75 /100 ))" )d php_errors.log

Fai attenzione perché quel comando può essere distruttivo poiché elimina il contenuto sul posto, senza crearne una copia.

Elimina il primo 75% di righe dal file menzionato.