Disco da 20TB

[mmiat]

salve a tutti
descrivo la mia necessità: ho una workstation sulla quale effettuiamo lavorazioni di tipo CAD, e lavoriamo con file molto grandi. Mediamente un progetto ha file per un totale di 2-3TB, e lavoriamo con 1-2 progetti alla volta. Terminato il progetto, salviamo su dischi USB3 e archiviamo (in armadio). Questa soluzione è scomoda per vari motivi:
1) per recuperare un progetto vecchio, bisogna tirar fuori il disco (dopo averlo cercato) e collegarlo
2) in pratica c'è una sola copia di un progetto, niente backup
3) attualmente nella workstation abbiamo una partizione da 6TB, quindi i progetti ci stanno giusti giusti e se avessimo necessità di lavorare con 3 progetti non ci stanno

quindi ho pensato un po' a come si potrebbe risolvere la cosa, la mia idea sarebbe:
1) prendere un pc o un server (ma quale?) che supporti fino a 12-16 dischi
2) installarci OpenMediaVault e usarlo come NAS o SAN
3) dotare workstation e pc/server di adeguata connessione di rete per avere un accesso veloce al NAS/SAN

pensavo poi di prendere intanto 3-4 dischi da 2TB, con OpenMediaVault creo un raid5 e poi, quando servirà altro spazio, aggiungerò dischi che andranno ad aumentare il raid5. Per la connessione di rete, o prendo 2-3 schede di rete gigabit e uno switch gigabit e faccio un link aggregation oppure prendere 2 schede di rete da 10Gbit e le collego direttamente.
per i backup, continuo ad usare il sistema dei dischi USB

che ve ne pare? accetto volentieri suggerimenti
grazie

[vale69]

perché non passi direttamente ad un NAS tipo 8 baie (QNAP o SYNOLOGY, questo ulteriormente espandibile con modulo esterno ad altri 8 HDD) con HDD da 3 o 4 TB

Soluzione semplice, versatile, veloce e performante oltre che facile da gestire con l'interfaccia web da qualsiasi PC in LAN o smartphone

[mmiat]

Synology mi sembra una cosa interessante: non mi piacciono molto i NAS perché di solito se non si avviano non hai modo di vedere il perché. con Synology ci sono modelli che hanno la possibilità di collegarci video e tastiera per provare ad intervenire? e se stacco i dischi sono formattati in formati standard che posso leggere anche da un normale pc?
grazie mille intanto

[mmiat]

altra cosa: mi serve una connessione da almeno 4,8 Gbit/s (600 MB/s), come fosse un disco SATA collegato direttamente

[insane74]

Originariamente inviato da mmiat

Synology mi sembra una cosa interessante: non mi piacciono molto i NAS perché di solito se non si avviano non hai modo di vedere il perché. con Synology ci sono modelli che hanno la possibilità di collegarci video e tastiera per provare ad intervenire? e se stacco i dischi sono formattati in formati standard che posso leggere anche da un normale pc?
grazie mille intanto

ai NAS non si collegano tastiere/mouse, non sono PC (almeno, mai visto/letto da nessuna parte che si possa fare).
per intervenire si va di interfaccia via browser o (se supportato) via telnet

Originariamente inviato da mmiat

altra cosa: mi serve una connessione da almeno 4,8 Gbit/s (600 MB/s), come fosse un disco SATA collegato direttamente

hanno una o più porte ethernet, quindi al massimo una gigabit.
immagino che esistano modelli con altri tipi di collegamento (fibra?), ma il costo poi...
cmq anche se usassi un PC con dentro dozzine di dischi SATA3, per poterli condividere sulla LAN dovresti comunque passare per la porta ethernet del pc, quindi al massimo gigabit, quindi il "collo di bottiglia" sarebbe lo stesso.

[mmiat]

ho visto che alcuni modelli di synology hanno la porta VGA, adesso cerco nei manuali...

per quanto riguarda la rete, anche con un normale pc si possono prendere più porte di rete e fare una link aggregation, quindi con una scheda di rete da 4 porte (o con 4 schede da 1Gb) dovrei teoricamente raggiungere i 4Gb. Oppure montare una scheda da 10GbE, anche i synology lo permettono (sono opzionali) anche se costano uno sproposito: 300€ almeno, non so' però cosa costi una scheda da 1Gb che supporti la link aggregation

[dia3olik]

ds1513+ o ds1813+ e sui pc scheda pci express intel a doppia porta gige, router gigabit con molte porte e vai di link aggregation su ogni workstation.



lascia perdere il fai da te,
ci perdi molto tempo e sono MOLTO meno affidabili.

parlo per esperienza.

ah...e ti consiglio comunque un backup...anche se avrai un nas...

[jerry74]

Ciao, ho necessità simili a quelle di mmiat anche se i file non sono di tipo cad ma archivi zippati e immagini di s.o.

Ho trovato qualcosa tipo la serie TS-XX79 di QNAP oppure dei Synology RS3413xs+ RS3412xs. Mi interessa un'alta capacità di storage espandibile in futuro, ridondanza dei componenti per prevenire blocchi macchina, ottima assitenza e possibilità di indicizzare il contenuto di file e immagini.

Di qnap e Synology (avendo sia a casa che a lavoro) mi spaventano assistenza e tipo di sistema operativo (fanno troppe cose spesso inutili) e per questo sto valutando anche un server con unità das, che ne pensate?

[mmiat]

devo ancora decidere sul da farsi.... vi risulta comunque esistano schede di rete 10GbE con un prezzo "umano", diciamo sotto i 200€?
grazie

[WarSide]

Originariamente inviato da mmiat

devo ancora decidere sul da farsi.... vi risulta comunque esistano schede di rete 10GbE con un prezzo "umano", diciamo sotto i 200€?
grazie

Oltre a Gb eth potresti anche prendere in considerazione Infiniband e con ogni porta arrivi anche a 20/40Gbit di throughput massimo.

Quante postazioni devi connettere al server di storage? Quanto sono lontane dallo stesso?

[mmiat]

Originariamente inviato da WarSide

Oltre a Gb eth potresti anche prendere in considerazione Infiniband e con ogni porta arrivi anche a 20/40Gbit di throughput massimo.

Quante postazioni devi connettere al server di storage? Quanto sono lontane dallo stesso?

in realtà l'importante è che ci si colleghi 1 macchina, la workstation. le altre devono solo, eventualmente, scaricarsi i file per visualizzare/controllare, mentre invece la workstation ha bisogno del collegamento veloce per poter effettuare dei calcoli/trasformazioni usando i file presenti nello storage

[WarSide]

Originariamente inviato da mmiat

in realtà l'importante è che ci si colleghi 1 macchina, la workstation. le altre devono solo, eventualmente, scaricarsi i file per visualizzare/controllare, mentre invece la workstation ha bisogno del collegamento veloce per poter effettuare dei calcoli/trasformazioni usando i file presenti nello storage

Se workstation e storage server non sono troppo distanti (al più una decina di metri) puoi usare infiniband tra quei 2 nodi con collegamento diretto, mentre gli altri accedono allo storage tramite Gigabit normale.

Se ti può interessare ho delle schede mellanox e dei cavi che non uso più

[mmiat]

Originariamente inviato da WarSide

puoi usare infiniband tra quei 2 nodi con collegamento diretto

ad una prima occhiata mi pare che né QNAP né SYNOLOGY abbiano tale protocollo tra le schede compatibili disponibili

[WarSide]

Originariamente inviato da mmiat

ad una prima occhiata mi pare che né QNAP né SYNOLOGY abbiano tale protocollo tra le schede compatibili disponibili

Infiniband te lo sogni su nas simili se non ci sborsi migliaia di euro, in questi casi l'unica è una soluzione home made

[Gherry]

Ciao,
ti do qualche info, partirei da qua:

Originariamente inviato da mmiat

2) in pratica c'è una sola copia di un progetto, niente backup

Innanzitutto mi sembra doveroso partire da qui: un sistema NAS, anche con ridondanza, NON E' UN BACKUP.

BACKUP è una copia di sicurezza che si DEVE tenere da un'altra parte.
Se va a fuoco il computer o l'ufficio, avere delle copie nello stesso mobile non serve a nulla

Se non fate backup sappi che, prima o poi, i dati li perderete.
I dischi si smagnetizzano (anche se ci vogliono anni), se non si rompono prima.

Una politica di backup consiste nel:
1-avere almeno 2 copie dei dati al sicuro
2-ogni tot farne una nuova copia (anche i dvd o i nastri diventano illegibili dopo qualche anno.



Detto ciò veniamo al discorso NAS.

Originariamente inviato da mmiat

1) prendere un pc o un server (ma quale?) che supporti fino a 12-16 dischi
2) installarci OpenMediaVault e usarlo come NAS o SAN
3) dotare workstation e pc/server di adeguata connessione di rete per avere un accesso veloce al NAS/SAN

Dato che ti serve molto spazio e molti dischi, hai assolutamente bisogno di un sistema con ridondanza (RAID).
Questo perchè, ovviamente, all'aumentare del numero di HD aumenta la probabilità che uno si rompa.

Anche io penso, viste le necessità, sia meglio orientarsi su un file-server vero, non i giocattoli Qnap o Synology che sono comodi e funzionali, ma limitati come opzioni ed espandibilità.

A questo punto occorre solo decidere quale soluzione sia migliore.
Openmediavault secondo me va bene per una casa e una collezione di film o musica.
Per una soluzione di tipo professionale, credo sia il caso di orientarsi su sistemi la cui affidabilità è provata.

Io, personalmente, userei FreeBSD su cui installerei i servizi necessari (e nulla di più) tipo samba e poco altro e popolerei il sottosistema storage con gruppi di 4 dischi con ZFS (raidz1).

Il vantaggio è avere una soluzione totalmente sicura ed affidabile (unix è ad oggi il sistema più stabile e usato per server al mondo) e costi molto ridotti, puoi anche riutilizzare un pc come base per il server a cui puoi aggiungere un semplice controller SAS-SATA (sui 100€ gestiscono fino a 8 dischi) tipo IBM M1015.

Originariamente inviato da mmiat

pensavo poi di prendere intanto 3-4 dischi da 2TB, con OpenMediaVault creo un raid5 e poi, quando servirà altro spazio, aggiungerò dischi che andranno ad aumentare il raid5.

Occhio che con 4 dischi da 2TB in raid5 hai una capacità di soli 6TB, quindi partiresti già 'stretto'.
Meglio 4 dischi da 3TB che ti danno una capacità di 9TB.

Discorso rete:
la rete sarà sempre il collo di bottiglia del NAS, probabilmente due schede Gigabit in link aggregation sono la soluzione più economica, attenzione che il router deve supportarla, non tutti lo fanno.

Ciao