Link alla notizia: https://www.hwupgrade.it/news/web/858-terabyte-svaniti-nel-nulla-e-nessun-backup-servizi-in-crisi-in-corea-del-sud_144632.html

Un incendio al data center NIRS di Daejeon ha cancellato 858 TB di dati governativi in Corea del Sud. Il disastro, causato dall’esplosione di batterie al litio durante lavori di manutenzione, ha bloccato 163 servizi pubblici. Mancavano backup del sistema G-Drive, compromettendo documenti e procedure statali essenziali.

Click sul link per visualizzare la notizia.

858 TB di dati "critici" e nessun backup? ...che dilettanti.

858 TB di dati memorizzati e nessun backup... :rolleyes: :rolleyes: :muro: :muro:

mai in quella del NORD..

858 TB di dati "critici" e nessun backup? ...che dilettanti.

se solo potessi parlare cambieresti idea

858 TB di dati "critici" e nessun backup? ...che dilettanti.

eh i dischi per i nas costano cari :O

eh i dischi per i nas costano cari :O

fra le varie cose anche questo ,ma è proprio una questione culturale, se non fai un backup ma solo una replica del dato spacciandolo per backup cosa pensi possa andare male? tutto come in questo caso

eh i dischi per i nas costano cari :O

Circa 12.000 euri per fare un backup di 860 TB, se non dilettanti che morti di fame :sofico:

Almeno come UPS potevano usare delle batterie LiFePO4 che non si incendiano altrettanto facilmente.

Circa 12.000 euri per fare un backup di 860 TB, se non dilettanti che morti di fame :sofico:

Almeno come UPS potevano usare delle batterie LiFePO4 che non si incendiano altrettanto facilmente.

una nas di qul tipo la paghi almeno 500 mila euro altro che 12.000, esperienza personale non è che compri i disci e li appoggi sul un tavolo e fai il backup ci vuole il sistema completo con tanto di software e quello costa piu di tutto

tu cosa hai fatto costo per disco come se fosse quello il costo della nas?

vai sul sito di dell hp o oracle e usa il configuratore per farti una nas vedrai che ti costa per molto meno come un appartamento in centro a milano, 12000€ non è nemmeno la provigione per il commerciale che te la vende

beh se uno se la cerca.....

per un sistema del genere è obbligatorio quantomeno un backup quotidiano in una struttura distinta per cautelarti da incendi e disastri naturali ma deve essere messo in conto che in caso di disastro il downtime sarà lungo (puoi anche avere il backup ma se il datacenter è andato a fuoco dove lo carichi ?)

il problema è che 858Tb sono tanti....

con una connessione a 10gb con un banda passante effettiva di 8Gb servono più di 29 ore..... quindi mettere in piedi un sistema di backup che sia abbastanza lontano da garantire l'immunità a disastri naturali non è semplicissimo

edit forse il tempo va moltiplicato x 8: sono Tera Byte e Giga bit

una nas di qul tipo la paghi almeno 500 mila euro altro che 12.000, esperienza personale non è che compri i disci e li appoggi sul un tavolo e fai il backup ci vuole il sistema completo con tanto di software e quello costa piu di tutto

tu cosa hai fatto costo per disco come se fosse quello il costo della nas?

vai sul sito di dell hp o oracle e usa il configuratore per farti una nas vedrai che ti costa per molto meno come un appartamento in centro a milano, 12000€ non è nemmeno la provigione per il commerciale che te la vende

fosse anche 1 milione di euro.
Gli mancavano allo stato?
Si sono trovati 1PB di roba dall'oggi al domani oppure è pigrizia nel dover implementare un sistema decente?
Io qui in azienda gestisco circa 50TB di dati e ho un'archivio di backup di 200TB (per avere anche lo storico) e fatturiamo circa 300.000.000€ all'anno.

beh se uno se la cerca.....

per un sistema del genere è obbligatorio quantomeno un backup quotidiano in una struttura distinta per cautelarti da incendi e disastri naturali ma deve essere messo in conto che in caso di disastro il downtime sarà lungo (puoi anche avere il backup ma se il datacenter è andato a fuoco dove lo carichi ?)

il problema è che 858Tb sono tanti....

con una connessione a 10gb con un banda passante effettiva di 8Gb servono più di 29 ore..... quindi mettere in piedi un sistema di backup che sia abbastanza lontano da garantire l'immunità a disastri naturali non è semplicissimo

edit forse il tempo va moltiplicato x 8: sono Tera Byte e Giga bit

Esistono sistemi di replica 1:1 in live, una volta allineati consumano meno banda/s di un backup incrementale.

Circa 12.000 euri per fare un backup di 860 TB, se non dilettanti che morti di fame :sofico:

Almeno come UPS potevano usare delle batterie LiFePO4 che non si incendiano altrettanto facilmente.


no dai
cioè
il backup di una mole simile costa qualche milione
tra connessioni e datastore adeguati
mah
sono spiccioli cmq per un PAESE come il loro poi

Esistono sistemi di replica 1:1 in live, una volta allineati consumano meno banda/s di un backup incrementale.

ah beh certo
una volta allineato si va di incrementali
ma cmq devono esserci dei full ogni tot per coerenza
cmq sia fattibilissimo
il risolversela con "troppi per essere backuppati" ...:eek:

ma va là

Nessun problema,io avevo fatto il backup su nastro perforato,ho giusto giusto qualche rotolino di questi 858 terabyte

Se non hanno fatto il backup forse non li ritenevano così importanti.

ah beh certo
una volta allineato si va di incrementali
ma cmq devono esserci dei full ogni tot per coerenza
cmq sia fattibilissimo
il risolversela con "troppi per essere backuppati" ...:eek:

ma va là

Per una quantità di dati così grande, non si va di incrementali, perché appunto potresti rompere la coerenza se fallisce e inoltre come hai fatto notare, devi comunque fare un full ogni tot. Quindi non è la strada migliore.

La strada migliore è mettere un load balancer davanti a questa infrastruttura e crearne un'altra gemella, dove ti assicura sia la rindodanza dei dati (perché appunto il load balancer scrive in entrambe in contemporanea), hai un'infrastruttura clone che risponde nel caso di down di una delle due esploda e inoltre hai anche un bel load balancer già fatto :)

Certo, i costi sono 2x infrastruttura esistente. Ma obbiettivamente uno stato per quanto povero, li ha quattro spicci da spenderci.

sicuramente era tutto ridondato in loco ma non è stata prevista la replica in datacenter dislocato altrove
anche perchè non è proprio semplice tenere sincronizzato quasi un 1PT di roba raddoppiando i costi già altissimi
"eh ma tanto non può andare a fuoco tutto il datacenter" :O :asd:

sicuramente era tutto ridondato in loco ma non è stata prevista la replica in datacenter dislocato altrove
anche perchè non è proprio semplice tenere sincronizzato quasi un 1PT di roba raddoppiando i costi già altissimi
"eh ma tanto non può andare a fuoco tutto il datacenter" :O :asd:

Ripeto, sincronizzare da zero 1PB, ha il suo costo e peso.
Ma dov'era l'organico IT/Dirigenziale quando la mole cresceva? Dormiva aggiungendo nodi e cluster di dischi?

e per fortuna che stiamo parlando della Corea del Sud, quelli di TSMC, la massima espressione della tecnologia al mondo.

Ma dov'era l'organico IT/Dirigenziale quando la mole cresceva? Dormiva aggiungendo nodi e cluster di dischi?

si davano alla bella vita con lo stipendione :read:

e per fortuna che stiamo parlando della Corea del Sud, quelli di TSMC, la massima espressione della tecnologia al mondo.

guarda che TSMC sta a taiwan :mbe:
TSMC = Taiwan Semiconductor Manufacturing Company

beh se uno se la cerca.....

per un sistema del genere è obbligatorio quantomeno un backup quotidiano in una struttura distinta per cautelarti da incendi e disastri naturali ma deve essere messo in conto che in caso di disastro il downtime sarà lungo (puoi anche avere il backup ma se il datacenter è andato a fuoco dove lo carichi ?)

il problema è che 858Tb sono tanti....

con una connessione a 10gb con un banda passante effettiva di 8Gb servono più di 29 ore..... quindi mettere in piedi un sistema di backup che sia abbastanza lontano da garantire l'immunità a disastri naturali non è semplicissimo

edit forse il tempo va moltiplicato x 8: sono Tera Byte e Giga bit

Magari non fai il backup di tutto il database tutti i giorni, ma lo suddividi in blocchi logici o per priorità.
Dati critici -> backup frequente e georeplicato.
Dati statici o meno importanti -> backup meno frequente, anche offline.

Non ho capito: c'è di mezzo TSMC?... e se ci fosse qualcosa di doloso orchestrato dalla Cina, approfittando della manutenzione batterie per danneggiare qualche ente scomodo pro US?

Ripeto, sincronizzare da zero 1PB, ha il suo costo e peso.
Ma dov'era l'organico IT/Dirigenziale quando la mole cresceva? Dormiva aggiungendo nodi e cluster di dischi?
forse la faccio facile ma.. quanto costa 1 PB di spazio in cloud su azure/aws/gdrive? Potevano usare quello al limite :D

perdonatemi, credo di essermi perso un pezzo.
da cosa è stato causato l'incendio? :angel:

perdonatemi, credo di essermi perso un pezzo.
da cosa è stato causato l'incendio? :angel:

Le batterie che normalmente montano sotto il :ciapet: le sicurissime auto elettriche.

forse la faccio facile ma.. quanto costa 1 PB di spazio in cloud su azure/aws/gdrive? Potevano usare quello al limite :D

Beh no costerebbe un botto.
Per il semplice fatto che devi pagare oltre all'hardware in affitto, qualcuno per gestire un'infrastruttura che probabilmente in qualche anno te la sei pagata avendo già i tecnici.

forse la faccio facile ma.. quanto costa 1 PB di spazio in cloud su azure/aws/gdrive? Potevano usare quello al limite :D

milioni di € è e lo paghi all 'infinito

Se non hanno fatto il backup forse non li ritenevano così importanti.

Una volta tanto sono d'accordo.
Non è che tutti i dati hanno la stessa importanza e la stessa unicità.

E poi c'è un enorme problema di diffusa incapacità a contenere la dimensione dei dati... mi sono capitate situazioni in cui a parità di qualità gli spazi si riducono di fattori 10 o talvolta pure 100. Cioè di 100MB si poteva tenerne 10 a qualità identica e UN singolo MB, a qualità indistinguibile. La gente non sa cosa sta salvando.

L’analfabetismo digitale è enormemente più diffuso di quanto si pensi.

Le batterie che normalmente montano sotto il :ciapet: le sicurissime auto elettriche.
Impossibile :sofico:

Le batterie che normalmente montano sotto il :ciapet: le sicurissime auto elettriche.
c'è scritto che le stavano spostando/sostituendo. Probabilmente le hanno mandate in corto. Insomma lavori affidati a capre, la sicurezza delle batterie e delle auto qua centra poco.

una nas di qul tipo la paghi almeno 500 mila euro altro che 12.000, esperienza personale non è che compri i disci e li appoggi sul un tavolo e fai il backup ci vuole il sistema completo con tanto di software e quello costa piu di tutto

tu cosa hai fatto costo per disco come se fosse quello il costo della nas?

vai sul sito di dell hp o oracle e usa il configuratore per farti una nas vedrai che ti costa per molto meno come un appartamento in centro a milano, 12000€ non è nemmeno la provigione per il commerciale che te la vende

Sei stato troppo basso.
Al solo gdrive ci accedevano 125k utenti in contemporanea.
Scusate ma posso essere anche un asino in matematica, ma 30 gb * 125000 utenti non dovrebbero fare oltre 3PB di spazio prellocato?
Più tutti gli altri servizi?

Sicuri che siano meno di 1000TB i dati persi?

Per chi ha maggior dimistichezza con le SAN ed i NAS di grandi dimensioni, esiste un sistema di backup che distribuisce i dati su più nodi in stile Torrent con almeno 3 livelli di parità?

30GB·125'000=3.75 PB

poi è lo spazio massimo e penso che molti abbiano occupato una minima parte dello spazio disponibile.

Precisiamo che TMSC è cinese di Taiwan dove parlano la stessa lingua della Cina ma usano uno i caratteri tradizionali e l'altro quelli semplificati.

edit

Sicuramente mi sfugge qualcosa, ma G-Drive non ha i backup sui sistemi di storage di Google? Bisogna farli noi in autonomia?

Sicuramente mi sfugge qualcosa, ma G-Drive non ha i backup sui sistemi di storage di Google? Bisogna farli noi in autonomia?

non è google drive eh
è G-drive, sistema coreano proprietario :D

e per fortuna che stiamo parlando della Corea del Sud, quelli di TSMC, la massima espressione della tecnologia al mondo.

Veramente TSMC è di Taiwan, non c'entra nulla con la Corea del Sud.

non è google drive eh
è G-drive, sistema coreano proprietario :D

AAHHHH, allora azzi loro :D :D :D

Per una quantità di dati così grande, non si va di incrementali, perché appunto potresti rompere la coerenza se fallisce e inoltre come hai fatto notare, devi comunque fare un full ogni tot. Quindi non è la strada migliore.

La strada migliore è mettere un load balancer davanti a questa infrastruttura e crearne un'altra gemella, dove ti assicura sia la rindodanza dei dati (perché appunto il load balancer scrive in entrambe in contemporanea), hai un'infrastruttura clone che risponde nel caso di down di una delle due esploda e inoltre hai anche un bel load balancer già fatto :)

Certo, i costi sono 2x infrastruttura esistente. Ma obbiettivamente uno stato per quanto povero, li ha quattro spicci da spenderci.

ci sono enne tecniche
anche xkè non sono 800tb monolitichi eh
resta il fatto che sono ricchissimi, ed appesi ad un filo come si è visto
meno male, quasi consolano noi italiani (anzi, ricordo che addirittura la regione lazio fu salvata dal reset totale, grazie ad un virtual TAP che avevano attivato)

sicuramente era tutto ridondato in loco ma non è stata prevista la replica in datacenter dislocato altrove
anche perchè non è proprio semplice tenere sincronizzato quasi un 1PT di roba raddoppiando i costi già altissimi
"eh ma tanto non può andare a fuoco tutto il datacenter" :O :asd:

se poi, come OVH, avevano un backup sullo stesso sito fisico
alora sei co@lione!!!
ma stando all'articolo, non c'era backup

cmq si tratta poi di repliche geodistribuite, ergo load balancer davanti a tutto ecc come hanno già detto

Magari non fai il backup di tutto il database tutti i giorni, ma lo suddividi in blocchi logici o per priorità.
Dati critici -> backup frequente e georeplicato.
Dati statici o meno importanti -> backup meno frequente, anche offline.

ma infatti
puoi fare tiering a mani basse
insomma morale, c'erano mille modi di evitarlo dai
anche e soprattutto che è la Corea "giusta" dal punto di vista della tecnologia e dei money

Esistono sistemi di replica 1:1 in live, una volta allineati consumano meno banda/s di un backup incrementale.

certo, lo so benissimo.

Il discorso è che dalle informazioni riportate non era un sistema in cui serviva un uptime del 99,99%

ovvero non è una compagnia aerea in cui anche 10 minuti di down bloccano tutto.

DA quanto riportato si tratta essenzialissime di documenti della loro PA, 24h di down sono fastidiose ma non distruttive....

il problema è che qui non c'è un piano di disaster recovery, perchè anche avessero avuto un backup esterno al datacenter distrutto non avrebbero avuto dove caricarlo

L'Italia ha affidato a SOGEI la gestione del ministero della finanze (ed agenzia delle entrate) e della sanita (Ricette, fascicolo sanitario elettronico, certificati) e gran parte dei dati e del sistema informativo è (o era) gestito in gran parte in una grande server farm di Roma, sulla Laurentina sicuramente dotata di tutti i sistemi di sicurezza necessari. Pochi anni fa (marzo del 2023 se non ricordo male) un problema tecnico (non so se anche sui collegamentei) ha bloccato mezza italia, tra cui l'Agenzia delle Entrate - parte della Sanità!!! E si sono chiesti che non era meglio ridondare qualache cosa per i dati ed i servizi. Ps non so se e che che contro misure hanno oggi preso, pensate ad alluvione, incendio o altro. PS 2 in Corea su scala piu grande è come fare i backup dei dati sull stesso HD: ti salva solo da un limitato sottoinsieme di eventi avversi.

L'Italia ha affidato a SOGEI la gestione del ministero della finanze (ed agenzia delle entrate) e della sanita (Ricette, fascicolo sanitario elettronico, certificati) .... .
Scusate gli errori di battitura :fagiano: