Salve

da circa 5 minutui stiamo cercando di killare processi brute force sul server

08.55 > dobbiamo riavviare forzatamente il server - dovuto riavviare la macchina forzatamente per un kernel panick

200 connessioni simultanee su un forum e macchina ingestibile da console

09.05 > purtroppo è partito lo scandisk per un errore di disco (fsck)

09.35 >scandisk in corso 
09.52 > ancora in corso

10.52 >ricostruzione del filesystem

Nel frattempo per sicurezza importiamo su altro server i backup di questa notte

11.45 >scandisk al 87%
12.05 >95% (scan delle directory)

Intanto i backup son salvati tutti su server nuovo esterno. Dobbiamo attendere prima di lanciarli. Si usano solo se vi è un non recupero totale

Dobbiamo attendere la fine del check filesystem e pertanto lo scandisk (fsck).

13.10 >98%

Dalle 14.50 stiamo ripristinando uno ad uno gli account. Il check è fallito 3 volte.
Ip e nameserver rimangono invariati su nuovo server

in aggiornamento segnalazione

 

--------------
Per info:
se vi fosse stato una rottura hardware DELL sarebbe intervenuta entro 4 ore (massima garanzia DELL) cosa che non è successa. nel caso fosse successo avremmo avuto minor down perchè usavamo ricambi presenti in loco.
Se fosse saltato un disco, il mirror avrebbe fatto si che nulla avreste notato
Se fosse saltato il mirror completo avremmo sostituito i dischi e usato il disco di backup
Se fosse un problema di rete come capitato, indipendente dal ns lavoro, scorsa volta con interconnessione telecom e tiscali, avremmo avuto problemi su tutti i server e nons olo noi
Se fosse un problema legato a riavvii normali sarebbe stato molto semplice sistemare il tutto. 
IL PROBLEMA è legato al reboot che ha richiesto uno scandisk su tutti i file (compresi i backup e sono milioni di files) e directory e non vi è modo di far partire il server senza lo scandisk (fsck per la precisione) a meno che si voglia creare problemi seri.
Non è un divertimento nè per voi nè per noi, noi che giustamente siamo al telefono occupati e a rispondere in 2 minuti alle email per infrmarvi della cosa e aggiornando questo link. Non è un divertimento anche perchè siamo bloccati con ANSIA davanti a questo monitor in console senza possibilità di velocizzare la cosa. Non è assolutamente bello neppure per noi

 

Scusateci per il disagio



Giovedì, Ottobre 31, 2013





« Indietro