Piccolo cluster di elaborazione distribuita

Sono uno studente del liceo che sta cercando di creare un cluster linux per un progetto (ho un sacco di computer decenti in programma per una nuova immagine questa estate, quindi il dipartimento tecnico in pratica dice che finché non li rompo fisicamente posso fare qualsiasi cosa.

Ad ogni modo, non so davvero nulla sulla costruzione di un cluster, ma sono abbastanza bravo con Linux.

Devo sapere queste cose: -Quale distro dovrei usare? Importa anche? -Quale software può configurare il cluster? -Sulla scheda o FS distribuito? -Quali siti in grado di offrire guide o how-to decenti?

Dipende davvero da cosa stai cercando di realizzare e cosa intendi per "Cluster di calcolo distribuito". Una volta ho fatto una cosa simile in Uni usando vecchie macchine e PVM che è il "Cluster" nel senso di un gruppo di macchine che agiscono come un singolo computer per eseguire l'elaborazione parallela - pensa ai cluster di Beowulf. Naturalmente, avrai bisogno di un codice scritto per trarne vantaggio.

Un buon punto di partenza sarebbe determinare cosa stai cercando di imparare con questo progetto. Consiglio di leggere l'articolo di Wikipedia su Parallel Computing per i principianti, e quindi di perfezionare le tue esigenze in base a ciò che vuoi fare.

Un semplice sistema di accodamento lavori (come gearman ) può essere sufficiente per ottenere rapidamente risultati interessanti.

Il problema che ho avuto quando ho creato un cluster di elaborazione parallela, era che non avevo nulla da fare su di esso, praticamente era seduto lì, ma era un progetto divertente e ho imparato parecchio. In ogni caso, probabilmente imparerai un po 'e ti divertirai allo stesso tempo, indipendentemente da ciò che scegli di implementare.

Per quanto riguarda la scelta delle distribuzioni, andrei con quello che mi è piaciuto di più, poiché probabilmente dovrai installare le cose dalla fonte. Una volta che hai dimestichezza con l'installazione di tutto, puoi cercare di trovare una distribuzione più adatta alle tue esigenze. Ma qualsiasi distribuzione dovrebbe fare.

Quale software configurare il cluster? Questo dipende interamente dal tipo di cluster creato.

A bordo vs. FS distribuito? Ancora una volta, questo dipende dai requisiti del cluster. Ciascun nodo passerà i dati avanti e indietro tra gli altri nodi? Opereranno come schiavi con un unico padrone? opereranno in modo completamente indipendente? Queste domande inizieranno a informare le tue scelte. E, naturalmente, ci sono sempre compromessi.

Alcuni altri link che potrebbero rivelarsi interessanti:

http://hadoop.apache.org/

http://www.csm.ornl.gov/oscar/

https://computing.llnl.gov/tutorials/parallel_comp/

http://www.google.com/Top/Computers/Parallel_Computing/Programming/Environments/

http://www.google.com/Top/Computers/Parallel_Computing/Beowulf/

Questo è un suggerimento molto semplice e non sviluppato; ma forse provare un cluster Plan 9? http://plan9.bell-labs.com/plan9/

Prova Linux HA (High Availability) è una soluzione cluster Linux disponibile gratuitamente che funziona su diverse distribuzioni.

Probabilmente è solo una delle numerose soluzioni. Non so come si confronta con gli altri, o anche quali siano le sue caratteristiche specifiche, so solo che alcuni compagni di lavoro lo hanno giurato per un serio software commerciale.