26 gigaflop fatti in casa!

[T-Rex83]

Originariamente inviato da tomsmile

Da quello che ho capito l'SO è un SO custom che devo configurare in base alle tue esigenze...
Logicamente LINUX :P

@McAuriel
Dacci qualche info in +?

Che era Linux lo sapevo, il mio problema è che su Linux non so niente, uso sporadicamente Mandriva 2008, ma per mia curiosità, per mancanza di tempo non posso dedicare troppo tempo ad imparare.

[McAuriel]

Io uso una debian poi alcune librerie e pacchetti li ho chiaramente ricompilati

[McAuriel]

Originariamente inviato da T-Rex83

Interessante, io volendo per provare potrei allestirne uno anche con pc potenti.
Che sistema operativo mi consigli? Come settarlo al meglio?

Cosa intendi con "pc potenti"? A cosa lo useresti il cluster?

[T-Rex83]

Sarebbe uno sfizietto che vorrei togliermi farne uno..
Per ora mi piacerebbe provarne uno piccolino con dei P3 1000 che ho in casa, ne dovrei avere 5 se non sbaglio.
Lo userei per Boinc anche se un cluster è inutile..

[zago]

ma una cosa del genere è possibile utilizzarla ad esempio per rendering molto "pesanti" ... tipo con pro/E?

[McAuriel]

Originariamente inviato da T-Rex83

Sarebbe uno sfizietto che vorrei togliermi farne uno..
Per ora mi piacerebbe provarne uno piccolino con dei P3 1000 che ho in casa, ne dovrei avere 5 se non sbaglio.
Lo userei per Boinc anche se un cluster è inutile..

Infatti ha poco senso pensare ad un cluster solo per BOINC. Io ho attivo boinc sul cluster solo quando non si sono altri job (diciamo programmi) in esecuzione. Puoi sbizzarrirti e "divertirti" giusto per i servizi e l'ottimizzazione del SO...

Originariamente inviato da zago

ma una cosa del genere è possibile utilizzarla ad esempio per rendering molto "pesanti" ... tipo con pro/E?

Non mi intendo di grafica 3D ma sicuramente qualcosa in rete si trova. Ma probabilmente non di profilo entry level

[T-Rex83]

Originariamente inviato da McAuriel

Infatti ha poco senso pensare ad un cluster solo per BOINC. Io ho attivo boinc sul cluster solo quando non si sono altri job (diciamo programmi) in esecuzione. Puoi sbizzarrirti e "divertirti" giusto per i servizi e l'ottimizzazione del SO...

Lo so che per Boinc sarebbe inutile, era più che altro uno sfizio mio personale

[McAuriel]

Originariamente inviato da T-Rex83

Lo so che per Boinc sarebbe inutile, era più che altro uno sfizio mio personale

Però molte cose (scheduler, resource manager, environment MPI, monitoring distribuito, shell distribuita...) non ha senso installarle se poi non si ha occasione di usarle... cioè rischi di fare un loavoro/sbattimento incompleto e che ti ruba solo tempo.

Un cluster beowulf non sono solo un numero di PC che condividono la stessa subnet di LAN...

[tomsmile]

McAuriel...
In che ambito hai sviluppato il tuo progetto? (università, lavoro...etc)?
Che utilizzo ne fai?

[McAuriel]

Sul sito c'è scritto un un pò cosa è. Io mi sono occupato principalmente solo della parte tecnico/sistemistica mentre gl iutilizzatori veri e propri sono altri. Io ho fatto qualcosa (poco) di CFD.

[tomsmile]

Quale sito?

[McAuriel]

Originariamente inviato da tomsmile

Quale sito?

http://scilx.disco.unimib.it/

[bio82]

Originariamente inviato da McAuriel

http://scilx.disco.unimib.it/

una stima approssimativa della potenza di calcolo di quel sistema si può avere ?

bio

[McAuriel]

Originariamente inviato da bio82

una stima approssimativa della potenza di calcolo di quel sistema si può avere ?

bio

Sto elaborando un benchmark completo sia sull'efficienza reale dei processori sia sulla rete di interconnessione.

LE CPU sono vecchiotte (>7 anni) e non so darti ora un valore in MFlops preciso. .. no nho molto tempo di guardare su google.

Nonostante sia vecchia il suo sporco lavoro lo fà abbastanza bene, niente di esagerato, ma è ancora un macchinino molto utile

[AleLinuxBSD]

Diversi anni fà avevo letto un'articolo in una rivista Linux su un cluster linux (collocato all'interno di "un'armadio" climatizzato) che veniva utilizzato per creare gli effetti speciali 3d in diversi film d'azione.
Tra l'altro per non sprecare neanche una goccia di potenza e di memoria l'intero sistema era lasciato a linea di comando!

Purtroppo però questi sistemi vanno bene per campi di ricerca e aziendali (dove è necessaria un'elevata potenza di calcolo) e non per utente singolo, il vero problema di questa soluzioni (a parte la configurazione) e che per potere sfruttare a fondo la potenza di calcolo disponibile è necessario disporre (o crearsi) programmi che si interfacciano con specifiche librerie.

E' possibile, sebbene parzialmente, fare un paragone con gli attuali processori multi-core dove gli applicativi devono essere ottimizzati per potere usare i vari core presenti sul sistema.
Nel caso dei sistemi beowulf l'interfaccia su cui si devono appoggiare i programmi è più complessa.

Quando diverso tempo fà mi ero interessato a questi sistemi avevo pure letto che le migliori prestazioni si ottengono mettendo in cluster processori con la stessa potenza di calcolo, del resto è logico, dato che in questo modo viene facilitata la gestione del load balancing da parte del nodo che si occupa di coordinare tutti i nodi presenti nel sistema.

Nel sistema di McAuriel, dopo che ha realizzato i benchmark, penso che potrebbe incrementare ulteriormente le prestazioni del sistema usando schede ethernet da 1 gbit.

In Ganglia web monitor ho visto che il sistema non va in swap, bella cosa, in questo modo le prestazioni vanno alla grande.

Nota:
Mi fà molto piacere la presenza di un'esperto di questa materia.

La primissima volta che ho sentito il termine Beowulf è stato quando nella Rai c'era una trasmissione che dedicava alcuni minuti a parlare di novità nel campo dell'informatica, in quel caso l'esempio mi pare fosse relativo all'uso di un sistema beowulf (in america) usato in ambito meteorologico (dove la potenza di calcolo non è mai sufficiente).

[McAuriel]

Originariamente inviato da AleLinuxBSD

Nel sistema di McAuriel, dopo che ha realizzato i benchmark, penso che potrebbe incrementare ulteriormente le prestazioni del sistema usando schede ethernet da 1 gbit.

La rete ethernet è una rete di servizio, non è usata per il calcolo. Sono utilizzate invece schede Dolphin con queste prestazioni
- Over 385 MBytes/s throughpu
- 1.4 microsecond latency
- 0.2 microsecond pipelined store

fonte: http://www.wulfkit.com/products/hardware/D334etal.html

[tomsmile]

Originariamente inviato da McAuriel

http://scilx.disco.unimib.it/

Grazie..

Anche se in breve non ho capito in che ambito è utilizzato...

[bio82]

Originariamente inviato da McAuriel

...

al momento abbiamo qualche server gestiti autonomamente da noi e utilizzando il cluster umano...praticamente ci si mette d'accordo su che nodi uno usa e gli altri si ricordano di non usarli...ma con l'aumentare dei server stiamo pensando di creare un vero e proprio cluster...

ovviamente chiedevo solo per capire uno poco di + il funzionamento

bio

ps: pensando al titolo del topic mi viene da ridere su come cambiano i tempi...al momento 26 giga flops li faccio con un solo server e neanche al 100%

[Tommy81]

Ragazzi esistono anche stime di consumo elettrico per Gflop? Più che altro per curiosità.

[bio82]

Originariamente inviato da Tommy81

Ragazzi esistono anche stime di consumo elettrico per Gflop? Più che altro per curiosità.

non so quanto esattamente tira in gigaflop il server + potente che ho, non ho benchmark reali, ma ho raggiunto un picco di 20 gigaflop con ansys su un dual barcelona 2.2 e consuma circa 400 w a pieno carico, misurato con una pinza amperometrica (quindi decisamente approssimativo)...in parole povere quel server fa 20w a gigaflop

ovviamente questo valore è molto approssimativo e cmq, dato che ansys non riesce a spremere al 100% gli 8 core, molto alto...

bio