Sono possibili filesystem in cluster ZFS?

16

È possibile creare un cluster ZFS? O avresti bisogno di seguire la strada apparentemente brutta (almeno per me) di ZFS con pool formattati UFS governati da GlusterFS?

L'idea è vedere se è possibile espandersi nel negozio distribuito Multi-Petabyte che ZFS dovrebbe essere in grado di gestire senza problemi.

Qualche puntatore, blog, post?

— SteveMustafa
fonte

Suppongo che tu abbia già guardato Lustre; in attesa che i nostri esperti ZFS locali suonino ...

— Deer Hunter,

4

Puoi raggruppare ZFS con almeno due soluzioni:

"Il clustering è ora disponibile non solo come prodotto commerciale come la soluzione RSF-1 da www.high-availability.com ma anche come soluzione OpenSource basata su PaceMaker. Http://www.clusterlabs.org/wiki/Main_Page "

— Mike
fonte

Non mi ero reso conto che il pacemaker funzionasse su FreeBSD. Grazie. Detto questo, hai provato ZFS su Linux?

— SteveMustafa,

1

Inoltre, ora dopo tutto questo tempo, vorrei chiarire che per clustering per ZFS, intendo lo spazio di archiviazione in continua espansione, basta aggiungere scatole / dischi

— SteveMustafa,

3

Perché sì, è possibile creare un cluster basato su ZFS attivo / passivo utilizzando DAS condiviso e SAS multipath.

Dettagli su: https://github.com/ewwhite/zfs-ha/wiki

La chiave di questo progetto di archiviazione ad alta disponibilità è un enclosure di archiviazione collegato SAS condiviso o JBOD. Anche se non è condiviso nulla , questo può essere un modo utile per offrire una maggiore disponibilità a un'impostazione di archiviazione che può ridimensionarsi verticalmente.

Per integrare il contenitore JBOD condiviso, sono necessari due server (nodi principali o controller) per fornire connettività client e risorse di calcolo / RAM per l'array ZFS.

I server e il contenitore JBOD devono essere disposti in una topologia ad anello di cablaggio SAS.

Questo può ridimensionare usando più recinzioni ...

— ewwhite
fonte

2

Forse questo ti interessa: il filesystem Sequoia 55PB Lustre + ZFS

Proviene dal Lawrence Livermore National Laboratory (LLNL). In quel laboratorio è in fase di sviluppo una porta nativa di ZFS su Linux.

— kschurig
fonte

Conosco Lustre, ma non pensavo che ci fosse una porta su FreeBSD. Interessante, questo richiede qualche indagine in più da parte mia. Grazie per il link. Per inciso, KQ Infotech, uno dei facchini di ZFS su Linux non lo sta più attivamente sviluppando dal 2011 ( osnews.com/story/24853/… )

— SteveMustafa,

2

Non nativamente. Si potrebbe avere un vero e proprio file system cluster in esecuzione su cima di un negozio di ZFS supporto, anche se ...

Tuttavia, sono disponibili cluster ZFS ad alta disponibilità (attivo-attivo) , ma non è quello che intendevi con la tua domanda ... Forse la funzione di clustering dello spazio dei nomi Nexenta ...

— ewwhite
fonte

Non l'HA, che sfortunatamente si riduce a due macchine. Stavo pensando a qualcosa che può coprire diverse dozzine di JBOD, forse attraverso data center, persino continenti :) Penso un po 'grande ..

— SteveMustafa,

@SteveMustafa È disponibile anche un plug-in Nexenta Namespace Cluster ...

— ewwhite,

Nexenta è eccezionale, ma la loro licenza è quasi inutile per i miei scopi. Sto cercando di basare questo completamente su FLOSS.

— SteveMustafa,

1

Parla con loro delle tue esigenze. Nessuno paga al dettaglio!

— ewwhite,

Buon punto. Darò loro un anello e vedrò come vanno le cose. Finora, ZFS con UFS governato da Lustre sembra il modo più fattibile per me finora. È quello che devo ancora provare e in teoria è grandioso.

— SteveMustafa,