Come ottenere la dimensione effettiva della directory (fuori da du)?

Come posso ottenere le dimensioni effettive della directory, usando gli strumenti standard UNIX / Linux?

Domanda alternativa: come faccio a visualizzare du la dimensione effettiva della directory (non l'utilizzo del disco)?

Poiché le persone sembrano avere diverse definizioni del termine "dimensione": La mia definizione di "dimensione della directory" è la somma di tutti i file regolari all'interno di quella directory.

NON mi interessa la dimensione dell'inode della directory o qualunque cosa (blocchi * dimensione del blocco) i file occupino sul rispettivo file system. Una directory con 3 file, 1 byte ciascuno, ha una dimensione di directory di 3 byte (per definizione).

Il calcolo della dimensione della directory usando du sembra essere inaffidabile.
Ad esempio, mkdir foo && du -b fooriporta "4096 pippo", 4096 byte anziché 0 byte. Con directory molto grandi, la dimensione della directory indicata du -hspuò essere disattivata di almeno 100 GB (!) (File system compresso).

Quindi quale (strumento / opzione) deve essere usato per ottenere la dimensione effettiva della directory?

Ecco uno script che mostra una dimensione di directory leggibile dall'uomo usando gli strumenti standard Unix (POSIX).

#!/bin/sh
find ${1:-.} -type f -exec ls -lnq {} \+ | awk '
BEGIN {sum=0} # initialization for clarity and safety
function pp() {
  u="+Ki+Mi+Gi+Ti+Pi+Ei";
  split(u,unit,"+");
  v=sum;
  for(i=1;i<7;i++) {
    if(v<1024) break;
    v/=1024;
  }
  printf("%.3f %sB\n", v, unit[i]);
}
{sum+=$5}
END{pp()}'

per esempio:

$ ds ~        
72.891 GiB

Alcune versioni dusupportano l'argomento --apparent-sizeper mostrare la dimensione apparente anziché l'utilizzo del disco. Quindi il tuo comando sarebbe:

du -hs --apparent-size

Dalle pagine man per du incluse in Ubuntu 12.04 LTS:

--apparent-size
      print apparent sizes,  rather  than  disk  usage;  although  the
      apparent  size is usually smaller, it may be larger due to holes
      in (`sparse') files, internal  fragmentation,  indirect  blocks,
      and the like

Solo un'alternativa, usando ls:

ls -nR | grep -v '^d' | awk '{total += $5} END {print total, "Total"}'

ls -nR: -nlike -l, ma elenca UID e GID numerici ed -Relenca le sottodirectory ricorsivamente.

grep -v:Invertire il senso della corrispondenza, per selezionare linee non corrispondenti. (-v è specificato da POSIX.). '^ d'escluderà le directory.

Comando Ls: http://linux.about.com/od/commands/l/blcmdl1_ls.htm

Man Grep: http://linux.die.net/man/1/grep

MODIFICA :

Modificato come suggerimento @ Sergey Vlasov.

Supponendo che tu abbia duda GNU coreutils, questo comando dovrebbe calcolare la dimensione apparente totale del numero arbitrario di file regolari all'interno di una directory senza limiti arbitrari sul numero di file:

find . -type f -print0 | du -scb --files0-from=- | tail -n 1

Aggiungi l' -lopzione duse ci sono alcuni file hardlink all'interno e vuoi contare ogni hardlink separatamente (per impostazione predefinita duconta più hardlink solo una volta).

La differenza più importante con plain du -sbè che ricorsivo duconta anche dimensioni di directory, che sono riportate in modo diverso da diversi filesystem; per evitare ciò, il findcomando viene utilizzato per passare solo i file regolari a du. Un'altra differenza è che i collegamenti simbolici vengono ignorati (se devono essere contati, il findcomando deve essere modificato).

Questo comando consumerà anche più memoria del semplice du -sb, perché l'utilizzo del dispositivo --files0-from=FILErende dustore e inode i numeri di tutti i file elaborati, al contrario del comportamento predefinito di ricordare solo i file con più di un collegamento reale. (Questo non è un problema se l' -lopzione viene utilizzata per contare più volte i collegamenti fissi, poiché l'unico motivo per memorizzare i numeri di dispositivo e inode è quello di saltare i file con collegamenti fissi che erano già stati elaborati.)

Se vuoi ottenere una rappresentazione leggibile dall'uomo della dimensione totale, aggiungi semplicemente l' -hopzione (funziona perché duviene invocata una sola volta e calcola la dimensione totale stessa, a differenza di altre risposte suggerite):

find . -type f -print0 | du -scbh --files0-from=- | tail -n 1

o (se sei preoccupato che alcuni effetti di -bvengano quindi annullati da -h)

find . -type f -print0 | du -sc --apparent-size -h --files0-from=- | tail -n 1

Se tutto ciò che desideri è la dimensione dei file, escludendo lo spazio occupato dalle directory, potresti fare qualcosa del genere

find . -type f -print0 | xargs -0 du -scb | tail -n 1

@SergeyVlasov ha sottolineato che ciò non funzionerà se si dispone di più file di argmax. Per evitare che tu possa usare qualcosa come:

find . -type f -exec du -sb '{}' \; | gawk '{k+=$1}END{print k}'