Raggruppa i file in alcune cartelle

Ho alcuni file con estensioni diverse, come *.pdf, *.mp3, *.jpge pochi altri. Tutti sono memorizzati in una parentdirectory.

Come posso ottenere un elenco di tutte le estensioni, creare alcune cartelle basate su queste estensioni e quindi spostare tutti i file nelle relative cartelle?

Lo script python qui sotto fa il lavoro. I file nascosti vengono archiviati separatamente in una cartella, così come i file senza estensione.

Dal momento che potrebbe essere utilizzato per una vasta gamma di scopi, ho aggiunto alcune opzioni:

• Puoi impostare le estensioni che desideri escludere dalla "riorganizzazione". Se vuoi semplicemente spostare tutto, impostaexclude = ()
• Puoi scegliere cosa fare con le cartelle vuote ( remove_emptyfolders = Trueo False)
• Nel caso in cui desideri copiare i file invece di spostarli , sostituisci la riga:

shutil.move(subject, new_dir+"/"+name)

di:

shutil.copy(subject, new_dir+"/"+name) 

Il copione:

#!/usr/bin/env python3

import os
import subprocess
import shutil

# --------------------------------------------------------
reorg_dir = "/path/to/directory_to_reorganize"
exclude = (".jpg") # for example
remove_emptyfolders = True
# ---------------------------------------------------------

for root, dirs, files in os.walk(reorg_dir):
    for name in files:
        subject = root+"/"+name
        if name.startswith("."):
            extension = ".hidden_files"
        elif not "." in name:
            extension = ".without_extension"
        else:
            extension = name[name.rfind("."):]
        if not extension in exclude:
            new_dir = reorg_dir+"/"+extension[1:]
            if not os.path.exists(new_dir):
                os.mkdir(new_dir)
            shutil.move(subject, new_dir+"/"+name)

def cleanup():
    filelist = []
    for root, dirs, files in os.walk(reorg_dir):
        for name in files:
            filelist.append(root+"/"+name)
    directories = [item[0] for item in os.walk(reorg_dir)]
    for dr in directories:
        matches = [item for item in filelist if dr in item]
        if len(matches) == 0:
            try:
                shutil.rmtree(dr)
            except FileNotFoundError:
                pass

if remove_emptyfolders == True:
    cleanup()

SE esiste il rischio di sovrascrivere i file duplicati indesiderati

A scapito di alcune righe extra, possiamo evitare di sovrascrivere possibili duplicati. Con il codice seguente, i duplicati verranno rinominati come:

duplicate_1_filename, duplicate_2_filename 

eccetera.

Il copione:

#!/usr/bin/env python3

import os
import subprocess
import shutil

# --------------------------------------------------------
reorg_dir = "/path/to/directory_to_reorganize"
exclude = (".jpg") # for example
remove_emptyfolders = True
# ---------------------------------------------------------

for root, dirs, files in os.walk(reorg_dir):
    for name in files:
        subject = root+"/"+name
        if name.startswith("."):
            extension = ".hidden_files"
        elif not "." in name:
            extension = ".without_extension"
        else:
            extension = name[name.rfind("."):]
        if not extension in exclude:
            new_dir = reorg_dir+"/"+extension[1:]
            if not os.path.exists(new_dir):
                os.mkdir(new_dir)
            n = 1; name_orig = name
            while os.path.exists(new_dir+"/"+name):
                name = "duplicate_"+str(n)+"_"+name_orig
                n = n+1
            newfile = new_dir+"/"+name
            shutil.move(subject, newfile)

def cleanup():
    filelist = []
    for root, dirs, files in os.walk(reorg_dir):
        for name in files:
            filelist.append(root+"/"+name)
    directories = [item[0] for item in os.walk(reorg_dir)]
    for dr in directories:
        matches = [item for item in filelist if dr in item]
        if len(matches) == 0:
            try:
                shutil.rmtree(dr)
            except FileNotFoundError:
                pass

if remove_emptyfolders == True:
    cleanup()

MODIFICARE

Con in mente OP, ci siamo tutti dimenticati di aggiungere un'istruzione su come usare. Dal momento che potrebbero apparire ( e fare ) domande duplicate , potrebbe essere comunque utile.

Come usare

1. Copia uno degli script in un file vuoto, salvalo come reorganize.py

2. Nella sezione head dello script, imposta la directory target (con i file da riorganizzare):

   reorg_dir = "/path/to/directory_to_reorganize" 

   (usa le virgolette se la directory contiene spazi)

   possibili estensioni che desideri escludere (probabilmente nessuna, come di seguito):

   exclude = ()

   e se desideri rimuovere le cartelle vuote in seguito:

   remove_emptyfolders = True

3. Esegui lo script con il comando:

   python3 /path/to/reorganize.py

NB se desideri copiare i file anziché spostarli , sostituisci:

shutil.move(subject, new_dir+"/"+name)

di:

shutil.copy(subject, new_dir+"/"+name)

Prova prima un piccolo campione.

È possibile utilizzare findcon un execcomando piuttosto complesso :

find . -iname '*?.?*' -type f -exec bash -c 'EXT="${0##*.}"; mkdir -p "$PWD/${EXT}_dir"; cp --target-directory="$PWD/${EXT}_dir" "$0"' {} \;

# '*?.?*' requires at least one character before and after the '.', 
# so that files like .bashrc and blah. are avoided.
# EXT="${0##*.}" - get the extension
# mkdir -p $PWD/${EXT}_dir - make the folder, ignore if it exists

Sostituire cpcon echoper una corsa a secco.

Più efficiente e ordinato sarebbe salvare il bashcomando in uno script (diciamo, a /path/to/the/script.sh):

#! /bin/bash

for i
do
    EXT="${i##*.}" 
    mkdir -p "$PWD/${EXT}_dir"
    mv --target-directory="$PWD/${EXT}_dir" "$i" 
done

E poi esegui find:

find . -iname '*?.?*' -type f -exec /path/to/the/script.sh {} +

Questo approccio è piuttosto flessibile. Ad esempio, per usare il nome del file anziché l'estensione ( filename.ext), dovremmo usarlo per EXT:

NAME="${i##*/}"
EXT="${NAME%.*}"

ls | gawk -F. 'NF>1 {f= $NF "-DIR"; system("mkdir -p " f ";mv " $0 " " f)}'

Calcolo dell'elenco delle estensioni (dopo lo spostamento):

ls -d *-DIR

Calcolo dell'elenco delle estensioni (prima di spostarsi):

ls -X | grep -Po '(?<=\.)(\w+)$'| uniq -c | sort -n

(in quest'ultimo esempio, stiamo calcolando il numero di file per ogni estensione e ordinandolo)

Prova questo script di shell.

#!/bin/sh
src=`dirname "$1"`/`basename "$1"`;
for file in "$src"/*?.?*; do
  if test -f "$file"; then
    dest="$src${file##*.}"_files;
    mkdir -p "$dest";
    mv "$file" "$dest";
  fi;
done;

# pass the directory to re-organize as first argument
# moves only regular files which have extension
# ignores other type of files including
# files having no extension, hidden files, directories, and links.

Se hai installato il nome / nome di Perl:

rename 's!(.*)\.(\w+)$! mkdir($2); "$2/$&"!ge'  *