Come gestite l'archiviazione dei dati? [chiuso]

I backup sono una cosa, ma l'archiviazione a lungo termine è un'altra. Ad esempio, potrebbe essere necessario archiviare e-mail per 7 anni o conservare indefinitamente tutti i dati del progetto. In passato salvavo gli archivi su nastro, ma poi i nastri venivano distrutti (le unità strappano il nastro). Quindi ... scrivi su 2 nastri che ti sento dire. È quello che fanno gli altri? Hai 2 (o più) nastri degli stessi dati per ridondanza?

Ma poi l'altro problema è che i nastri di solito non possono essere letti da diversi fornitori di software di backup. Ad esempio, se si passa da Arcserve -> Backup Exec -> Commvault per oltre 10 anni, è necessario conservare tutti e 3 i sistemi in modo da poter ripristinare i vecchi dati. Allo stesso modo per l'hardware. I vecchi nastri potrebbero non essere codificati a barre. Potrebbe non essere compatibile con la nuova libreria, ecc. Ecc. Quindi mantieni l'hardware nastro vecchio e il software vecchio nel caso in cui potresti aver bisogno di ripristinare un file di 10 anni?

Oppure ... quando si passa a un nuovo sistema di backup, migrare tutti i dati archiviati sul nuovo sistema e ri-archiviarli su nuovi nastri? Potrebbe essere un lavoro enorme.

qualche idea?

Di quanti dati stiamo parlando? I nostri dati di "archivio" sono abbastanza piccoli che li conserviamo solo nella memoria live (su un'unità NAS) di cui viene eseguito il backup con i soliti dati live, quindi esiste esattamente come i nostri soliti dati ed è soggetto alle stesse tecniche di recupero senza doversi preoccupare di mantenere in giro la tecnologia decennale. Se i nostri dati in tempo reale si spostano su una nuova piattaforma di archiviazione, l'archivio si sposta di conseguenza. Abbiamo anche impostato le autorizzazioni per i dati di archivio in modo tale che solo un membro del gruppo di sicurezza dell'archivio (di cui ci sono pochissimi utenti membri) abbia accesso per rimuovere qualsiasi cosa da quelle cartelle.

Se hai a che fare con più dati di quanti possano essere ragionevolmente conservati nella memoria live, il nastro potrebbe essere la soluzione migliore per la memorizzazione a lungo termine, unita alla conservazione di almeno due copie in diverse posizioni di memoria controllata. Tirali fuori ogni due anni per assicurarti che i media siano ancora leggibili e migra da vecchi media a nuovi media se stai cambiando fornitore per assicurarti di poter continuare ad accedere ai dati.

Nel mio caso, archiviamo su nastro e ti dirò perché ha senso per noi.

Innanzitutto, il software che utilizziamo, Tivoli Storage Manager, è senza dubbio il software che utilizzeremo per il prossimo futuro. A mio avviso, TSM è il vertice della catena alimentare in termini di software di backup aziendale, quindi il problema di passare a una piattaforma software diversa è relativamente inesistente per noi.

Detto questo, manteniamo alcuni archivi a lungo termine e abbiamo diversi modi per farlo. Fortunatamente per noi, utilizziamo alcune delle più recenti tecnologie a nastro che possono contenere fino a 1 TB per cartuccia, quindi avere una grande quantità di archivi all'interno della libreria non è un problema.

• Archivia su nastri locali e copia quegli archivi nel nostro centro dati alternativo, con i nastri di archiviazione all'interno della libreria di nastri.

Lo facciamo per determinati tipi di dati perché i dati vengono ripristinati su base regolare ed è abbastanza importante da richiedere due copie.

• Archivia su nastri locali, ma non su nastri remoti, e lascia i nastri all'interno della libreria.

Lo facciamo per dati leggermente meno importanti, che devono essere ripristinati su base piuttosto regolare.

• Archivia su nastro locale e invialo fuori sede per l'archiviazione.

Le pratiche di cui sopra hanno funzionato abbastanza bene per noi in passato. Abbiamo migrato verso una tecnologia a nastro totalmente diversa un paio di anni fa, ed è stato un po 'di lavoro per spostare i dati, ma in realtà non è stato un grosso problema. In TSM era letteralmente un comando per server di archivi, e sarebbe stato eseguito. Potrebbero volerci un paio di giorni per correre, ma non è stato uno sforzo di lavoro attivo per nessuno.

L'onda del futuro è ovviamente l'archiviazione su disco.

Non appena se ne presenterà l'occasione, inserirò un array di dischi in una struttura di archiviazione sicura e copierò archivi di tipo audit a lungo termine su un dispositivo del genere.

Due installazioni EMC Centera (con mirroring da posizioni diverse). Costa un sacco di dollari, ma funziona.

http://www.emc.com/products/family/emc-centera-family.htm

Puoi anche cercare una soluzione come Data Domain (ora NetApp) . Archiviano e eseguono una compressione avanzata che chiamano DeDupe per cui cercano parti di dati simili e ottengono rapporti di compressione molto elevati.

Che tipo di dati stai cercando di eseguire il backup? Sono tutti dati "casuali" come video o musica? O sono i dati che potrebbero prestarsi alla compressione?

Andare avanti con la nuova soluzione di archiviazione e conservare i nastri per tutto il tempo necessario per i dati. Se lo richiedi in modo permanente, potresti prendere in considerazione la migrazione su disco. Con i backup su disco, la migrazione a supporti futuri è decisamente più semplice.

Tra un anno o forse 2 da ora puoi iniziare a disgregare i nastri se quei backup non sono più necessari.

Reimplementare è un grande sforzo se il tempo risolverà il tuo problema per te. Esegui l'analisi dei costi se hai un costo associato all'archiviazione dei backup e / o delle licenze software per lavorare con quelli.

Il tuo problema con l'archiviazione dei dati, per semplificare il tuo enigma, sembra essere la compatibilità futura dei vecchi nastri con il nuovo hardware.

La mia soluzione: scegli un solo fornitore con una soluzione completa (software e hardware) che ritieni possa fare del suo meglio per offrire la compatibilità precedente.

E ovviamente ottieni un ottimo rapporto qualità-prezzo considerando la tua fedeltà;)