sincronizzare un elenco di directory con percorso assoluto nel file di testo

Ho un file di testo contenente un elenco di directory con il suo percorso assoluto

$ cat DirectoriesToCopy.txt

/data/Dir1
/data/Dir2

Voglio usare rsync per copiare tutte queste directory preservando il suo percorso assoluto in un'altra posizione.

Ho provato il seguente comando rsync, ma non funziona

rsync -avr --include-from=DirectoriesToCopy.txt --exclude='*/' --exclude='/*'  /  /media/MyDestination/

Cosa non va qui?

Utilizzare il comando seguente:

rsync -av --include-from=DirectoriesToCopy.txt --include /data/ --exclude='/data/*' --exclude='/*/' / /media/MyDestination/

Devi includere / data / esplicitamente, potresti anche averlo aggiunto all'elenco nel file. Quindi escludi tutte le altre directory (l'ordine è importante con include / exclude).

Si noti che l'utilizzo di è -rstato ridondante in quanto incluso in -a.

EDIT: potresti anche ottenere lo stesso risultato con:

rsync -av --relative /data/Dir1 /data/Dir2 /media/MyDestination/

Non è rsync che ti costringe a fare cose difficili solo per copiare un paio di directory, ti dà solo diversi modi di fare la stessa cosa; in alcuni casi, andare nel modo include / exclude potrebbe essere più adatto, qui farei la cosa --relativa sopra (senza che --relativetu finisca con /media/MyDestination/Dir1e /media/MyDestination/Dir2, con --relativel'intero percorso sorgente sia copiato nella destinazione).

Voglio usare rsync per copiare tutte queste directory [da un elenco] preservandone il percorso assoluto in un'altra posizione

Non usare --includeo --filtervariazioni, poiché ciò confonderà semplicemente le cose. Invece, usa --files-from=_filename_. (Se lo fai, assicurati di fare molti test.)

1. Crea l'elenco di directory in un file, una directory / file per riga.

2. Usa rsync's --files-from=con il file sopra.

3. Utilizzare l' opzione --relative/ -Rper assicurarsi che i nomi dei percorsi di origine vengano copiati alla fine della destinazione.

4. Anche se hai l' -aopzione, includi anche -r. Dalla pagina man:

   In entrambi i casi, se l'opzione -r fosse abilitata, anche l'intera gerarchia di quella directory verrebbe trasferita (tenere presente che -r deve essere specificato esplicitamente con --files-from, poiché non è implicito da -a).

Comando completo:

rsync ${DEBUG:+-nv} -arR --files-from=<list_of_files.txt> <top-level-dir>  <target-dir>

(i file in list_of_files.txt devono essere relativi o trovati nella directory principale )

(se DEBUG è impostato, rsync stampa semplicemente ciò che potrebbe essere stato copiato.)

Il manuale di rsync avverte di questo scenario (sezione "Includi / escludi regole modello"):

questo non funzionerà:

+ /some/path/this-file-will-not-be-found
+ /file-is-included
- *

Ciò fallisce perché la directory padre "some"è esclusa dalla '*'regola, quindi rsync non visita mai nessuno dei file nelle directory "some"o "some/path". Una soluzione è chiedere l'inclusione di tutte le directory nella gerarchia utilizzando un'unica regola: "+ */"(inserirla prima della "- *"regola) e forse utilizzare l' --prune-empty-dirsopzione. Un'altra soluzione è aggiungere regole di inclusione specifiche per tutte le directory principali che devono essere visitate. Ad esempio, questo set di regole funziona bene:

+ /some/
+ /some/path/
+ /some/path/this-file-is-found
+ /file-also-included
- *

Nel tuo caso, credo che l'approccio più semplice sarebbe quella di preprocessare l'elenco delle directory per includere in modo che ogni volta che si include /path/to/foo, si includono anche tutte le directory principali ( /path/to, /path, /), e comprendono anche le sottodirectory delle directory originali ( /path/to/foo/***), e dopo tutto ciò ha una regola che esclude tutto ciò che non è stato precedentemente elencato ( *).

<DirectoriesToCopy.txt awk '
    {print "+ " $0 "/***"; while (sub(/\/+[^\/]+\/*$/, "/")) print "+ " $0}
    END {print "- *"}
' >rsync-rules.txt
rsync -avr --include-from=rsync-rules.txt  /  /media/MyDestination/