Unix & Linux text-processing

6

Ho un file di testo in una codifica sconosciuta o mista. Voglio vedere le righe che contengono una sequenza di byte non valida UTF-8 (eseguendo il piping del file di testo in un programma). Allo stesso modo, voglio filtrare le righe valide UTF-8. In altre parole, sto cercando .grep [notutf8] …

50 command-line text-processing character-encoding unicode

10

Come verificare se un file utilizza CRLF o LF senza modificarlo?

Devo eseguire periodicamente un comando che assicuri che alcuni file di testo siano mantenuti in modalità Linux. Sfortunatamente dos2unixmodifica sempre il file, che rovinerebbe i timestamp di file e cartelle e causerebbe scritture non necessarie. La sceneggiatura che scrivo è in Bash, quindi preferirei le risposte basate su Bash.

48 bash text-processing newlines

13

Come stampare tutte le righe dopo una corrispondenza fino alla fine del file?

Il file di input1 è: dog 123 4335 cat 13123 23424 deer 2131 213132 bear 2313 21313 Do alla corrispondenza il modello da in other file(come dog 123 4335da file2). Corrispondo al motivo della linea è dog 123 4335e dopo aver stampato tutte le linee senza linea di corrispondenza il …

48 text-processing sed grep

19

Esiste un robusto strumento da riga di comando per l'elaborazione di file CSV?

Lavoro con file CSV e a volte ho bisogno di controllare rapidamente il contenuto di una riga o colonna dalla riga di comando. In molti casi cut, head, tail, e gli amici farà il lavoro; tuttavia, il taglio non può facilmente gestire situazioni come "this, is the first entry", this …

47 command-line software-rec text-processing csv

3

Come posso testare la codifica di un file di testo ... È valido e che cos'è?

Ho diversi .htmfile che si aprono in Gedit senza alcun avviso / errore, ma quando apro questi stessi file Jedit, mi avvisa della codifica UTF-8 non valida ... Il meta tag HTML indica "charset = ISO-8859-1". Jedit consente un elenco di codifiche di fallback e un elenco di rilevatori automatici …

46 text-processing utilities character-encoding

8

Come convertire TXT in PDF?

Voglio convertire i .txtfile in .pdf. Sto usando questo: ls | while read ONELINE; do convert -density 400 "$ONELINE" "$(echo "$ONELINE" | sed 's/.txt/.pdf/g')"; done Ma questo produce un "errore" - se c'è una riga molto lunga nel file di testo, non viene racchiuso. Testo di input PDF di output …

45 text-processing pdf imagemagick conversion

5

Elimina l'ultima riga dal file

Uso sed per eliminare rapidamente le righe con una posizione specifica come sed '1d' sed '5d' Ma cosa succede se voglio eliminare l'ultima riga del file e non conosco il conteggio delle righe (so che posso ottenerlo usando wce molti altri trucchi). Attualmente, utilizzare una soluzione alternativa con heade tailcombinato …

44 text-processing sed

5

Sostituire le variabili di ambiente in un file con i loro valori effettivi?

Esiste un modo semplice per sostituire / valutare le variabili di ambiente in un file? Come diciamo che ho un file config.xmlche contiene: <property> <name>instanceId</name> <value>$INSTANCE_ID</value> </property> <property> <name>rootPath</name> <value>/services/$SERVICE_NAME</value> </property> ...eccetera. Voglio sostituire $INSTANCE_IDnel file il valore della INSTANCE_IDvariabile d'ambiente, $SERVICE_NAMEcon il valore di SERVICE_NAMEvar env. Non saprò a …

41 shell-script text-processing scripting environment-variables

4

Come ottenere solo risultati unici senza dover ordinare i dati?

$ cat data.txt aaaaaa aaaaaa cccccc aaaaaa aaaaaa bbbbbb $ cat data.txt | uniq aaaaaa cccccc aaaaaa bbbbbb $ cat data.txt | sort | uniq aaaaaa bbbbbb cccccc $ Il risultato di cui ho bisogno è di visualizzare tutte le righe dal file originale rimuovendo tutti i duplicati (non solo …

40 text-processing uniq

6

Shell: come leggere i byte di un file binario e stamparli come esadecimali?

Nella shell, come posso leggere i byte di un file binario che ho e stampare l'output come numeri esadecimali?

39 shell text-processing binary

6

comando per l'elenco separato dalla scheda layout

A volte, sto ricevendo un elenco separato da schede di input, che non è del tutto allineato, ad esempio var1 var2 var3 var_with_long_name_which_ruins_alignment var2 var3 C'è un modo semplice per renderli allineati? var1 var2 var3 var_with_long_name_which_ruins_alignment var2 var3

39 command-line text-processing csv tabulation

4

Grep dalla fine di un file all'inizio

Ho un file con circa 30.000.000 di righe (Radius Accounting) e ho bisogno di trovare l'ultima corrispondenza di un determinato modello. Il comando: tac accounting.log | grep $pattern dà ciò di cui ho bisogno, ma è troppo lento perché il sistema operativo deve prima leggere l'intero file e quindi inviarlo …

39 text-processing files grep tail

5

Sostituisci tutte le nuove righe nello spazio tranne l'ultima

Come posso sostituire tutte le newline con spazio tranne l'ultima newline. Posso sostituire tutta la newline con lo spazio usando trma come posso farlo con alcune eccezioni?

38 bash shell-script text-processing tr

4

Modo più semplice per commentare / rimuovere il commento da alcune righe usando la riga di comando

C'è un modo per commentare / decommentare uno script shell / config / ruby usando la riga di comando? per esempio: $ comment 14-18 bla.conf $ uncomment 14-18 bla.conf questo aggiungerebbe o rimuoverebbe l' #accesso bla.confon line 14a 18. Normalmente lo uso sed, ma devo conoscere il contenuto di quelle …

37 shell-script text-processing

1

Come rendere consapevoli i caratteri non ascii (unicode)?

Sto cercando di rimuovere alcuni caratteri dal file (UTF-8). Sto usando trper questo scopo: tr -cs '[[:alpha:][:space:]]' ' ' <testdata.dat Il file contiene alcuni caratteri stranieri (come "Латвийская" o "àé"). trnon sembra capirli: li tratta come non alfa e li rimuove. Ho provato a cambiare alcune delle mie impostazioni locali: …

36 linux text-processing unicode tr

Domande taggate «text-processing»