Stato server SetiBoinc

[Marco71]

...potrei capirlo, questo sottodimensionamento hardware per il progetto S.E.T.I/B.O.I.N.C, se si verificasse in qualche "sgangherata" e "povera" facoltà universitaria italiana ma negli stra-ultra-mega-galatticamente ricchi U.S.A no!
O meglio me lo spiego con il fatto che ora mai in questa Terra senza ritorno economico in denaro non viene mosso più un dito...spero vivamente in cuori mio che come la "nostra" Terra non esista un altro pianeta in questo (nel "nostro") Universo od in uno degli "infiniti" Universi "bolla" teorizzati dai cosmologi.
Grazie.

Marco71.

[trekfan1]

Evvai, superata quota Novecentomila per le wu da convalidare:

Waiting for validation 903,043

[GHz]

Originariamente inviato da trekfan1

Evvai, superata quota Novecentomila per le wu da convalidare:

Waiting for validation 903,043

Con il breve down programmato di stasera (tutti i mercoledì dalle 19 alle 22), pensano di sistemare il problema prima di raggiungere il milione.....

[iCasty2005]

Originariamente inviato da GHz

Con il breve down programmato di stasera (tutti i mercoledì dalle 19 alle 22), pensano di sistemare il problema prima di raggiungere il milione.....

Ah beh allora.... siamo tranquilli!

[trekfan1]

Intanto la situazione peggiora (come sempre del resto):

Waiting for validation 919,999

[ilmennin]

Originariamente inviato da trekfan1

Intanto la situazione peggiora (come sempre del resto):

Waiting for validation 919,999

Certo con gli alieni non ci facciamo una bella figura .

Ciao a tutti .

[trekfan1]

Backup settimanale in corso....

Speriamo che risolvano anche questa faccenda della validazione dei crediti....

[Giusnico]

Infatti adesso non si può accedere nemmeno al database.

[iCasty2005]

Si, ma per risolvere il problema devono mettere il VALIDATOR su un server a parte (come lo era poco tempo fa...) e non quasi tutti i programmi sullo stesso computer (l'ormai famoso PENGUIN), altrimenti non riuscirà mai a smaltire la coda, anzi.. crescerà sempre più.

[Myjungle]

e' proprio vero che ogni volta che mettono mano ai server fanno danni...tutto down!!!

data-driven web pages klaatu Running
scheduler galileo Disabled
feeder galileo Not Running
file_deleter1 penguin Disabled
file_deleter2 penguin Disabled
file_deleter3 penguin Disabled
file_deleter4 penguin Disabled
db_purge koloth Not Running
transitioner1 penguin Not Running
transitioner2 penguin Not Running
transitioner3 koloth Not Running
transitioner4 koloth Not Running
transitioner5 kosh Not Running
transitioner6 kosh Not Running
sah_validate1 penguin Disabled
sah_validate2 penguin Disabled
sah_validate3 penguin Disabled
sah_validate4 penguin Disabled
sah_assimilator1 penguin Not Running
sah_assimilator2 penguin Not Running
sah_assimilator3 penguin Not Running
sah_assimilator4 penguin Not Running
sah_splitter1 galileo Disabled
sah_splitter2 milkyway Disabled
sah_splitter3 philmor Disabled
sah_splitter4 kosh Disabled
sah_splitter5 sagan Disabled

[ilmennin]

Hanno finito la manutenzione, ma se possibile hanno caricato ulteriormente il penguin ad un primo sguardo .
E intanto le wu da accreditare aumentano..... .

[trekfan1]

August 18, 2005 - 01:00 UTC
The chief reason that the validator is behind is that that there are so many result files in the upload directories. A lot of these files are queued up for deletion but the file deleter is slowed down by the same large directory problem.

In addition, there are a great many result files in our upload directories that have no corresponding row in the database. These disassociated result files will never be deleted by the file deleter program. Such results can appear when a workunit had reached it's quorum number of returned results and is passed through validation, assimilation, file (both workunit and result) deletion and finally DB purging and *then* one or more results come in (perhaps they were slowed down by running intermittently on a laptop). The disassociated results are the bulk of what needs deleting.

During today's outage we started fast deleting both sorts of old result files. First we queried the database for the earliest workunit that still needs validation and then queried for the received date of it's oldest result. We then went another month back in time, just to be safe, and started deleting all result files older than this. But we were not happy with what we were seeing. We were only deleting around 25% of the number of files that we had predicted. On looking further we saw that that 75% of these delete-ready files were received during the 1 month safety period that we had added. The project is growing that fast.

We will be having another short outage soon to get some timing numbers on deleting all of the delete-ready files and will then schedule a long outage or series of outages to to get them all. We have to do this during an outage because of the strain it places on the file server that holds the files. We are looking at ways to speed this up. And, of course, ways to keep these files from building up again.

[trekfan1]

E naturalmente ecco il report delle wu da convalidare:

Waiting for validation 972,534

[Ernst]

Certo che è una bella menata!

[Giusnico]

Ormai ho 148 WU in pending...

[trekfan1]

Il milione di wu da convalidare si avvicina sempre di più...

Waiting for validation 977,967

[iCasty2005]

Originariamente inviato da Giusnico

Ormai ho 148 WU in pending...

solo 148????? Beato te.... guarda noi come siamo messi.....

Data e ora del calcolo 18/08/2005 09:21:52
Tempo di esecuzione script: 2mins 37secs
Nick User: Flotta Stellare
Pending Credit: 35120.48
Wu in pending: 1020
Total Credit: 184,170.52
Recent Average Credit: 2,372.96

[Luca DellOca]

Originariamente inviato da iCasty2005

solo 148????? Beato te.... guarda noi come siamo messi.....

Siamo tutti nella stessa cac.. ehm barca

Data e ora del calcolo 18/08/2005 09:42:28
Tempo di esecuzione script: 4mins 13secs
Nick User: Luca DellOca
Pending Credit: 111779.62
Wu in pending: 3049
Total Credit: 1,969,326.77
Recent Average Credit: 6,338.75
Media crediti claimed/assigned (WU): 36.45 / 25.54 (4867/2042)
Numero di Host: 44

Quello che mi chiedo io e' perchè hanno spostato tutti i servizi su penguin, che oltretutto è una delle macchine più piccole che hanno? Per ri-allocare altri server nel frattempo? Potrebbe, ma è una cosa che non sta avvenendo.
Ho sinceramente paura che quando spegneranno il classic e tutti passeranno a boinc qua rischia di collassare tutto....

Ciao, Luca.

[Marco71]

...sono arrivato alle tue stesse (catastrofiche) conclusioni nell'autunno 2004...
Quando la transizione verso il S.E.T.I/B.O.I.N.C sarà completa, stante il cronico sottodimensionamento dell'hardware destinato al progetto, i problemi saranno elefantiaci...sigh!....
E' la stessa storia dello Shuttle....
In oltre venti anni gli U.S.A non hanno voluto investire fondi per una vera alternativa, sicura da ogni punto di vista, con i disastrosi risultati della tragica missione ST-107...
I soldi per lo sviluppo di armi invece si trovano sempre, anche con fondi più o meno "occulti"...
Grazie e scusate dello sfogo ma è da quasi una anno ormai che "soffro in silenzio" vedendo tutti i problemi hardware/software della "nuova piattaforma B.O.I.N.C".
Ora sono proprio stanco...

Marco71.

[iCasty2005]

Originariamente inviato da Luca DellOca

Siamo tutti nella stessa cac.. ehm barca

Quello che mi chiedo io e' perchè hanno spostato tutti i servizi su penguin, che oltretutto è una delle macchine più piccole che hanno? Per ri-allocare altri server nel frattempo? Potrebbe, ma è una cosa che non sta avvenendo.
Ho sinceramente paura che quando spegneranno il classic e tutti passeranno a boinc qua rischia di collassare tutto....

Ciao, Luca.

Luca hai pienamente ragione...

Il problema è proprio questo... anche quelli del SETI dicono che il progetto BOINC sta crescendo troppo... e loro non riescono a stare dietro a questo incremento.

Una cosa è certa: il PENGUIN non piò andare avanti così.. solo 2 CPU (almeno fosse uno di quelli a 6 CPU che hanno, e che sono quasi parcheggiati..), ma dovrebbe essere dedicato solo al validator, e forse ce la farebbe. Ogni server per gestire bene tutto dovrebbe avere il suo programma. E non due/tre programmi a server.. altrimenti notte fonda.