The Limulus (LInux MULti-core Unified Supercomputer) Project

[AleLinuxBSD]

The Limulus Project
Particolarità di questo supercomputer:
Limulus Software - basato su una distro enterprise
4 nodi - costituiti usando normali schede madri micro-atx con supporto processori fino a 65W*
case - normale case con alcune aggiunte per ospitare le varie motherboard
alimentatore - viene usato un singolo alimentatore
costo: 5000 dollari circa, molto contenuto, per le prestazioni disponibili.

Nexlink Limulus Specifications
vers. commerciale del progetto disponibile dal 2012.

Però, volendo, è possibile autoassemblarsi un simile computer, pure da soli, dato che il software usato è open.

Limulus FAQ

* Presumo che l'uso di Cpu fino a 65 W sia dovuto alla scelta di volere realizzare un sistema base di 4 nodi, dato lo spazio comunque limitato, per cercare di mantenere il tutto su temperature accettabile, si sarà deciso per questo compromesso.
Quindi penso che niente vieterebbe di realizzare un sistema, basato invece su solo 2 motherboard con cpu intel ivy bridge top di gamma (i sostituiti del 2600k).
Anche se il tpd risulta leggermente più alto (77W) potendo posizionare le schede un po' più distanti ...
Automaticamente una simile soluzione porterebbe pure altri tipi di vantaggi:
meno cavi
alimentatore di capacità inferiore
consumi inferiori
costi inferiori ..
Volendo si potrebbe limare qualche altro centinaio di euro optando per un SSD da 120 gb anziché da 256 gb.
Insomma, se qualcuno ha i mezzi e la voglia, di giocherellare un po', magari poi potrebbe aprire un topic, naturalmente correlato da fotografie passo-passo ed elenco dei benchmark realizzati con una simile bestia.

Nota:
Non riesco a capire come facciano ad usare un singolo alimentatore per alimentare più schede madri.

[D1o]

il progetto è interessante (lo seguo da un po') ma secondo me l'incaponirsi con un singolo case, pur di generose dimensioni), limita di molto le risorse utilizzabili.

io preferirei una ws singola ben carrozzata e un robo del genere http://helmer.sfe.se/ con su ROCKS in uno sgabuzzino, in modo che calore e rumore siano lontani da me.

siccome è probabile che me lo costruisca in un futuro non troppo remoto, mi ero fatto due conticini. una situazione maxed out, ( 6 nodi i7 2600k, 16 gb/nodo, switch hp procurve) viene un filo meno di quella cifra. (520€/nodo piu 1000€ di switch 24 porte, in previsione di espansione/ channel bonding) = circa 4000€. not bad per un sistema 24 core / 96gb ram

inoltre le dimensioni del limulus precludono l'uso di gpucomputing, uso di router belli maschi, limitano la ram e la potenza di cpu, introduce un sacco di single point of failure etc...

però indubbiamente è affascinate da seguire.

[Slater91]

Non immaginavo che si potessero fare cose di questo genere. È veramente notevole cosa si riesce ad ottenere. Davvero interessante, ad avere i mezzi per poter sperimentare un po'.

[tecno789]

Originariamente inviato da Slater91

Non immaginavo che si potessero fare cose di questo genere. È veramente notevole cosa si riesce ad ottenere. Davvero interessante, ad avere i mezzi per poter sperimentare un po'.

quoto davvero, non sapevo neanche si potesse fare una cosa del genere
tra l'altro ci vuole un sistema operativo realizzato ad hoc...

[Slater91]

Originariamente inviato da tecno789

quoto davvero, non sapevo neanche si potesse fare una cosa del genere
tra l'altro ci vuole un sistema operativo realizzato ad hoc...

Diciamo "ingegnerizzato" ad hoc... Linux è già bello e realizzato

[tecno789]

Originariamente inviato da Slater91

Diciamo "ingegnerizzato" ad hoc... Linux è già bello e realizzato

esattamente si, intendevo proprio quello...

[Slater91]

Originariamente inviato da tecno789

esattamente si, intendevo proprio quello...

In ogni caso si capisce il potenziale di Linux. È davvero senza limiti.

[tecno789]

Originariamente inviato da Slater91

In ogni caso si capisce il potenziale di Linux. È davvero senza limiti.

si davvero. Non c'è proprio paragone!

[D1o]

Originariamente inviato da Slater91

Non immaginavo che si potessero fare cose di questo genere. È veramente notevole cosa si riesce ad ottenere. Davvero interessante, ad avere i mezzi per poter sperimentare un po'.

bhe, sperimentare (e capire le intricazioni di un setup del genere) può essere fatto in maniera virtuale con le VM. non si avrà la potenza di calcolo di un sistema vero, ma è molto istruttivo.

se siete interessati all'HPC c'è un ebook gratuito fatto da amd (hpc for dummies) che da un'infarinata generale sull'argomento.

[tecno789]

Originariamente inviato da D1o

bhe, sperimentare (e capire le intricazioni di un setup del genere) può essere fatto in maniera virtuale con le VM. non si avrà la potenza di calcolo di un sistema vero, ma è molto istruttivo.

se siete interessati all'HPC c'è un ebook gratuito fatto da amd (hpc for dummies) che da un'infarinata generale sull'argomento.

scusami in che senso in macchina virtuale??

[D1o]

Originariamente inviato da tecno789

scusami in che senso in macchina virtuale??

nel senso che è possibile creare un cluster in virtuabox.

non si avranno le performances di un cluster fisico ma è interessante capire come funziona.

oppure si può usare i server di amazon per creare un cluster virtuale on demand.

[AleLinuxBSD]

Originariamente inviato da D1o

siccome è probabile che me lo costruisca in un futuro non troppo remoto, mi ero fatto due conticini. una situazione maxed out, ( 6 nodi i7 2600k, 16 gb/nodo, switch hp procurve) viene un filo meno di quella cifra. (520€/nodo piu 1000€ di switch 24 porte, in previsione di espansione/ channel bonding) = circa 4000€. not bad per un sistema 24 core / 96gb ram

2 x Intel® Core™ i7-3930K Processor
Con però il limite massimo teorico totale di 64 gb di ram ...
Ma se per te quel quantitativo di Ram è indispensabile, potresti aggiungere un ulteriore Cpu ed i costi dovrebbero mantenersi inferiori, complessivamente, ma vanteresti addirittura un numero maggiore di core.
Ti permetterebbero un bel risparmio di denaro ... anche se dati i consumi, non si adattano ad essere inseriti in un case di questo tipo.
Potresti costruirti un case personalizzato, spendendo molto meno, anziché provare a trovare una soluzione già pronta.

[AleLinuxBSD]

Originariamente inviato da D1o

inoltre le dimensioni del limulus precludono l'uso di gpucomputing

In un futuro vicino le dimensioni del case fisico risulteranno inifluenti dato che a partire dagli Ivy bridge farà la comparsa Thunderbolt (pure sui Pc) che dispone di una banda passante più che adeguata (ben 10 gbps).
Chiaramente, per chi è interessato agli Xeon, dovrà attendere la prossima generazione basata sugli Ivy bridge anziché gli attuali che si basano sui Sany bridge.
Come ho già avuto modo di dire in un altra occasione, potere mettere schede video esternamente, consente molti benefici, considerando quanto questi componenti riscaldano e come risultano montate a distanza di pochi cm l'uno dall'altro (mi riferisco alle configurazioni che permettono il montaggio di più schede video).

Piuttosto uno dei grossi limiti delle soluzioni basate dalla Gpu consiste nella memoria utilizzabile (limitata a quella video presente sulla scheda) che non si sommano tra loro (per cui se anche si disponesse di più schede, ad es. di 2 gb di ram, il processo disporrà sempre di 2 gb).
Piuttosto sarebbe da capire se è possibile limitare selettivamente il rendering a qualche elemento di una scena (date le limitate risorse disponibilj) senza spezzettarlo fisicamente, in modo da fare preview per piccoli gruppi singoli, basandosi sulla cpu per il rendering totale finale.

Nota:
Al livello di puro calcolo, come sono questo tipo di soluzioni, se si potesse disporre di connessioni da 10 gbps, a costi accessibili, sarebbe un bel vantaggio.

[D1o]

Originariamente inviato da AleLinuxBSD

2 x Intel® Core™ i7-3930K Processor
Con però il limite massimo teorico totale di 64 gb di ram ...
Ma se per te quel quantitativo di Ram è indispensabile, potresti aggiungere un ulteriore Cpu ed i costi dovrebbero mantenersi inferiori, complessivamente, ma vanteresti addirittura un numero maggiore di core.
Ti permetterebbero un bel risparmio di denaro ... anche se dati i consumi, non si adattano ad essere inseriti in un case di questo tipo.
Potresti costruirti un case personalizzato, spendendo molto meno, anziché provare a trovare una soluzione già pronta.

momento, io parlavo di core fisici... con i 2 x 3930 ne avrei la metà spendendo sempre parecchi soldi (tutta la piattaforma è tendenzialemnte piu costosa)

[AleLinuxBSD]

Hai ragione, io mi sono limitato a leggere il numero dei cori indicati, senza tenere in considerazione il numero di i7 previsti, per cui il totale complessivo risultava diverso.

Penso però che in un ipotetico confronto tra un sistema composto da 6 nodi i7 2600k, e la seguente ipotetica configurazione composta da:
2 x Intel® Core™ i7-3930K Processor
+
2 x Intel® Ethernet Server Adapter X520-DA2*
la differenza prestazionale complessiva, sorprendendemente, non dovrebbe essere così abissale come ci si potrebbe aspettare considerando l'enorme differenza computazionale in termini di core.

Questo perché:
- In un sistema a più nodi, specie se lo scopo primario è il calcolo, un grosso collo di bottiglia è rappresentato dalla scheda di rete (1 gbps "teorico" non è poi molto ...)
- il maggiore quantitativo di cache disponibile nella soluzione 3930K dovrebbe farsi sentire, magari non molto, però qualche differenza dovrebbe farla.

Nota:
* L'idea alla base è disporre di una scheda di rete da 10gb con 2 porte in modo da evitare di ricorrere ad uno switch - che costano molto - almeno nel caso di configurazioni tra 2 nodi.
Supponendo che questa scheda sia adatta.