Unix & Linux duplicate

2

Ricerca di immagini duplicate open source per Linux?

Esiste un cercatore di immagini duplicate gratuito e open source per sistemi basati su Linux? Trovare duplicati esatti (in base al contenuto, non al nome del file) è sufficiente per me, ma la capacità di trovare immagini simili sarebbe sicuramente fantastica.

16 search image-manipulation images duplicate

10

Rimuovi tutte le parole duplicate dalla stringa usando lo script della shell

Ho una stringa come "aaa,aaa,aaa,bbb,bbb,ccc,bbb,ccc" Voglio rimuovere la parola duplicata dalla stringa, quindi l'output sarà simile "aaa,bbb,ccc" Ho provato questo codice sorgente $ echo "zebra ant spider spider ant zebra ant" | xargs -n1 | sort -u | xargs Funziona bene con lo stesso valore, ma quando do il mio …

12 shell-script shell text-processing xargs duplicate

6

Come rimuovere i file duplicati usando bash

Ho una cartella con file duplicati (da md5sum( md5su un Mac)) e voglio avere uncron processo pianificato per rimuovere qualsiasi trovato. Tuttavia, sono bloccato su come farlo. Quello che ho finora: md5 -r * | sort Che produce qualcosa del genere: 04c5d52b7acdfbecd5f3bdd8a39bf8fb gordondam_en-au11915031300_1366x768.jpg 1e88c6899920d2c192897c886e764fc2 fortbourtange_zh-cn9788197909_1366x768.jpg 266ea304b15bf4a5650f95cf385b16de nebraskasupercell_fr-fr11286079811_1366x768.jpg 324735b755c40d332213899fa545c463 grossescheidegg_en-us10868142387_1366x768.jpg 3993028fcea692328e097de50b26f540 …

10 bash shell-script hashsum duplicate

8

Trova file PDF duplicati per contenuto

Alcune riviste generano un PDF diverso per ogni download. APS, ad esempio, memorizza l'ora e l'indirizzo IP nel PDF. Oppure esiste una versione cartacea con collegamenti ipertestuali e una con riferimenti testuali. Come è possibile trovare download duplicati di documenti con uguale contenuto al 90% su un sistema linux usando …

9 scripting pdf imagemagick duplicate

6

Utilizzare basename per analizzare un elenco di percorsi contenuti in un file

Sto eseguendo Mac OSX e sto cercando di utilizzare la riga di comando per trovare il numero di file che ho con lo stesso nome. Ho provato a usare il seguente comando: find ~ -type f -name "*" -print | basename | sort | uniq -d > duplicate_files Non funziona! …

9 find osx filenames duplicate basename

3

Rimuovi mp3 duplicati con nome, dimensioni e hash diversi

Ho una vasta libreria musicale (tutto mp3), ma un po 'della musica è quasi la stessa ma: Forse uno o due secondi in più Circa il 97% è uguale a un altro brano O un altro bitrate. C'è un modo per trovare questi duplicati? Come accennato, non hanno le stesse …

9 mp3 music duplicate

5

Rimuovere le righe duplicate da un file che contiene un timestamp

Questa domanda / risposta ha alcune buone soluzioni per eliminare le linee identiche in un file, ma non funzionerà nel mio caso poiché le righe altrimenti duplicate hanno un timestamp. È possibile dire a awk di ignorare i primi 26 caratteri di una riga nel determinare i duplicati? Esempio: [Fri …

8 text-processing awk duplicate deduplication

Domande taggate «duplicate»