Down del network: Mercoledì 20 Agosto

***Paolo Corsini*** · 21-08-2003, 08:24

Nella giornata di ieri, Mercoledì 20 Agosto, abbiamo subito un down completo di tutti i servizi di Hardware Upgrade a partire dalle 15.45 circa. Tutti i servizi sono stati ripristinati per le 19.10, mentre per il forum è stato necessario correggere alcuni errori in specifiche tabelle database, operazione completata verso le 21.20 circa.

Il motivo del down è tanto semplice quanto assurdo: in server farm è mancata la corrente; il gruppo di continuità generale è entrato in funzione ma ha esaurito la sua capacità prima che fosse possibile avviare il gruppo di continuità ausiliario. Il fatto che molte persone siano ancora in ferie ha rallentato l'operazione di riavvio del gruppo di continuità, sino a quando l'UPS non ha terminato le batterie tampone la corrente è definitivamente saltata.

Per riavviare il cluster del sito non è purtroppo sufficiente ridare corrente e accendere a caso i server, ma bisogna seguire una procedura abbastanza precisa altrimenti il file system condiviso non viene visto tra i server. Inoltre, togliendo corrente in questo modo nella migliore delle ipotesi ci sono dei dati nei database che devono essere sistemati.

Appena saputo cosa era successo ieri sono andato in server farm (ci vuole circa 1 ora di macchina senza traffico dalla redazione), ricuperando Davide (che è in ferie ma ieri era a casa) che mi ha dato una mano in farm così da velocizzare le operazioni di ripristino.

La stessa cosa era successa la mattina del giorno 13 Agosto e sia io che Davide siamo dovuti intervenire direttamente in server farm a ripristinare il corretto funzionamento dei server.

intakeem · 21-08-2003, 13:17

Ora capisco come mai non funzionava più nulla....buon lavoro

Christian2003 · 21-08-2003, 22:00

love

Prendete a mazzate quelli della grapes...

A parte gli skerzi; fortuna che avete risolto tutto in giornata.

leon84 · 21-08-2003, 22:30

Certo , Paolo , che ce ne vuole per occuparsi di un sito web come questo ...

Ammiro la vostra voglia di fare , e soprattutto dobbiamo essere sempre più fieri di voi giacchè usufruiamo di servizi gratis mentre dietro tutto ciò c'è gente che lavora ...

Siete mitici !!!!!!!

rubex · 22-08-2003, 13:01

Grazie veramente x tutto,siete fantastici!

Bye

@Crikkkk-19 · 24-08-2003, 01:13

SIETE GRANDI!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!

Matrixbob · 10-09-2003, 18:47

veramente professionali!

21-08-2003, 08:24	#1
*Paolo Corsini* Amministratore Iscritto dal: Jul 1999 Città: Luino Messaggi: 4838	Down del network: Mercoledì 20 Agosto Nella giornata di ieri, Mercoledì 20 Agosto, abbiamo subito un down completo di tutti i servizi di Hardware Upgrade a partire dalle 15.45 circa. Tutti i servizi sono stati ripristinati per le 19.10, mentre per il forum è stato necessario correggere alcuni errori in specifiche tabelle database, operazione completata verso le 21.20 circa. Il motivo del down è tanto semplice quanto assurdo: in server farm è mancata la corrente; il gruppo di continuità generale è entrato in funzione ma ha esaurito la sua capacità prima che fosse possibile avviare il gruppo di continuità ausiliario. Il fatto che molte persone siano ancora in ferie ha rallentato l'operazione di riavvio del gruppo di continuità, sino a quando l'UPS non ha terminato le batterie tampone la corrente è definitivamente saltata. Per riavviare il cluster del sito non è purtroppo sufficiente ridare corrente e accendere a caso i server, ma bisogna seguire una procedura abbastanza precisa altrimenti il file system condiviso non viene visto tra i server. Inoltre, togliendo corrente in questo modo nella migliore delle ipotesi ci sono dei dati nei database che devono essere sistemati. Appena saputo cosa era successo ieri sono andato in server farm (ci vuole circa 1 ora di macchina senza traffico dalla redazione), ricuperando Davide (che è in ferie ma ieri era a casa) che mi ha dato una mano in farm così da velocizzare le operazioni di ripristino. La stessa cosa era successa la mattina del giorno 13 Agosto e sia io che Davide siamo dovuti intervenire direttamente in server farm a ripristinare il corretto funzionamento dei server. __________________ "I decided to go for a little run." - Follow me on Strava

21-08-2003, 13:17	#2
intakeem Senior Member Iscritto dal: Sep 2002 Città: pisa Messaggi: 8323	Ora capisco come mai non funzionava più nulla....buon lavoro __________________ SETI EMPEROR 3° LIVELLO Le mie statistiche su Boinc.Italy- -my flickr

22-08-2003, 13:01	#5
rubex Senior Member Iscritto dal: Nov 1999 Città: Prov CT-Sicilia Messaggi: 3328	Grazie veramente x tutto,siete fantastici! Bye __________________ \|OPTY 165@2700\|ZALMAN 7700CU\|MSI K8N SLi DIAMOND\|22" BELINEA 108080\|G.SKILL 2GB HX@250Mhz 2.5-3-2-52.5V\| \|LITE-ON 52x32x52x\|2x80GB HITACHI 7K250 SATA RAID 0\|ASUS HD4850 512MB\|ENERMAX LIBERTY 620W\|ADSL 8MBIT\| \|FUELED BY HONDA S2000 MY04 BLUE NURBURGRING - SUZUKI SV1000S SILVER\|N95 8GB\|FUJI S9500\|My PhotoGallery\|*

24-08-2003, 01:13	#6
@Crikkkk-19 Utente sospeso Iscritto dal: Dec 2001 Città: ITALIA Messaggi: 1015	SIETE GRANDI!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! __________________ PENTIUM IV Northwood 3.4Ghz - 2048MB PC 3200 DDR 400 - ABIT IC7 MAX3 - Gainward BLISS 7900GS 512MB - Sound Blaster AUDIGY II PLATINUM EX - Creative Inspire T7900 7.1 - ENERMAX Noisetaker II 600W - PHILIPS 109P4 - Powered by NGI F5 ADSL

10-09-2003, 18:47	#7
Matrixbob Senior Member Iscritto dal: Jul 2001 Messaggi: 9947	veramente professionali! __________________ Aiuta la ricerca col tuo PC: >>Calcolo distribuito BOINC.Italy: unisciti anche tu<< Più largo è il sorriso, più affilato è il coltello.

21-08-2003, 22:00	#3
Christian2003 Member Iscritto dal: Dec 2002 Messaggi: 134	love Prendete a mazzate quelli della grapes... A parte gli skerzi; fortuna che avete risolto tutto in giornata.

21-08-2003, 22:30	#4
leon84 Senior Member Iscritto dal: Jul 2002 Città: Napoli Messaggi: 1964	Certo , Paolo , che ce ne vuole per occuparsi di un sito web come questo ... Ammiro la vostra voglia di fare , e soprattutto dobbiamo essere sempre più fieri di voi giacchè usufruiamo di servizi gratis mentre dietro tutto ciò c'è gente che lavora ... Siete mitici !!!!!!!

Strumenti
Mostra una versione stampabile Invia questa pagina per email