Incident sur filer4

[thibaud]

Bonjour,

Nous avons eu un incident sur filer 4 le 01/11 vers 23h puis un second incident sur le même serveur ce matin
02/11 vers 09h30.

Ceci était a priori engendré par un souci de driver de carte raid.

Nous avons changé le kernel et le driver afin de corriger cela.

Nous surveillons activement ce serveur afin d'éviter toute récidive.

Merci de votre compréhension,

[thibaud]

nous sommes obligés de recouper quelques minutes filer4 pour un check du filesystem.

[GCGCorp]

Bonjour Thibaud,

Est ce que le problème est toujours d'actualité ? Car nous avons des problèmes sur nos sites mais ne savons pas si c'est lié au timer ou s'il faut ouvrir un ticket.

Merci

[thibaud]

le check du filesystem est en cours.
malheureusement il n'est pas possible de faire autrement...

[serpico3]

Bonjour,

A-t-on une idée du temps que va encore prendre l'opération avant retour à la normale ?

Merci.

[thibaud]

c'est fini

[freqplus]

Merci Thibaud et bonne journée à toutes et tous

[foxyweb]

Merci pour votre intervention rapide qui avait bloquer mon accès à mon espace FTP ce matin !

[thibaud]

Bonjour,

Suite a l'incident d'hier soir (qui était a priori engendré par un bug de kernel/de driver de la carte raid du filer), le système de fichiers devait impérativement être vérifié/réparé pour revenir a un état normal et être stable de nouveau.

Nous avons été contraint de couper les services de filer4 entre 11h20 et 12h40 environ pour lancer le check.

L'opération s'est correctement déroulée et tout est opérationnel depuis.

Il s'agit d'un incident "imprévisible" et que nous avons pris en charge dès son début. Néanmoins le temps de check du système de fichiers n'est malheureusement pas réductible.
Le passage sur nos plateforme de backup auraient engendré plus de problèmes (retour en arrière au niveau version des fichiers, resynchronisation nécessaire par la suite) que de patienter pendant la réparation du filesystem...

Nous vous remercions par avance de votre compréhension,

[thibaud]

rebelotte, on est dessus

[thibaud]

Nous avons fixé pour ce soir le problème.

demain matin vers 6h, nous allons intervenir sur filer4 pour :
- changer la carte raid
- changer la connectique vers le backplane

Cela va engendrer une coupure des sites de filer4 demain matin pendant 15 a 20 minutes
environ.

Ceci est nécessaire pour réussir a régler définitivement le problème puisque les interventions
réalisées jusque la n'ont pas solutionné le problème.

Merci de votre compréhension et toutes nos excuses pour la gène occasionnée par ce nouvel
incident imprévisible sur filer4.

[thibaud]

je vais eteindre filer4

[thibaud]

c'est revenu.

Pour info, cela a été plus long que prévu car c'est la semaine pas de chance !
j'ai changé la nappe multilane par une nappe neuve dans le doute.... et ... c'est la nouvelle nappe qui ne marchait pas
du coup, j'ai d'abord pensé a un problème de nouvelle carte raid, retesté avec l'ancienne pour voir que cela venait de la
nappe et devoir a nouveau remettre la nouvelle carte raid + une autre nappe.

On va voir ce que cela donne avec la nouvelle carte...

[JPC]

Bonjour

Re-coupure vers 14h40, comme hier soir.

On s'oriente vers la "quinzaine" de malchance?

[Fourche]

"Incident en cours. Merci de votre comprehension"

encore pareil du coup ?