Errors en el servei de disc del DAC

Durant aquesta setmana passada s'han produït diversos errors en múltiples discos del clúster de disc que dóna servei a pràcticament tots els altres serveis TIC del DAC. Alguns discos s'han avariat i han deixar de funcionar i d'altres han fallat temporalment i han tornat a funcionar correctament al cap d'un temps. Tot plegat ha fet que el clúster hagi hagut de moure dades amunt i avall, fins al punt que ha afectat a diversos servidors (bé per càrrega alta per la latència de les operacions d'entrada-sortida, o directament perquè s'han aturat).

Fins al moment hem canviat 3 dels 4 discos avariats i hem pogut recuperar els 11 discos que havien fallat temporalment, però és molt possible que calgui canviar-ne algun més. Hem estat monitoritzant l'estat del clúster, hem restablert els serveis que havien caigut i no tenim constància que s'hagin perdut dades. El clúster de disc ara mateix està estable però encara no en estat òptim de salut.

Seguirem treballant per acabar de resoldre la situació i anirem publicant les novetats en aquest apunt de blog.