Hi, wie die meisten sicher mitbekommen haben ist am Freitag seit 20.48 einige Server nicht erreichbar gewesen. Darunter waren der - rabbit04 - rabbit03 - service01.fer - db02.fer Hintergrund dafür ist, dass der vmhost-c21.xres.traso.de nicht mehr funktionierte. Als ich gegen 22.00 auch von dem Problem mitbekommen habe, habe ich versucht den vmhost versucht zu erreichen. Dieser war zwar noch über einen Ping erreichbar aber nicht per ssh. Über die iDrac Karte bin ich noch auf den vmhost gekommen, konnte auch noch den Bildschirm sehen, der allerdings nicht mehr reagiert hatte. Darauf habe ich dann den vmhost durch gestartet. Als der vmhost wieder da war habe ich mitbekommen, dass kein Netzwerkinterface gestartet wurde. Daraufhin hab ich mich mit der Switch verbunden um den LACP-Port status zu überprüfen. Der vmhost wurde auf beiden Interfaces von der switch geblockt. Um das Problem zu beheben, habe ich die vlans noch mal alle entfernt und wieder hinzugefügt. Auch auf dem vmhost habe ich die openvswitch Konfiguration gelöscht und neu erstellt, weil dort vlan's angegeben waren die es gar nicht gab. Als diese fertig war habe ich die Maschine neu gestartet und die Interfaces waren wieder online. Nach dem start der vm's habe ich alle notwendigen vm's wieder in den autostart gepackt. Zeit ca. 23.08 Uhr. Danach habe ich die replication des db02.fer angeworfen und die repikation wieder repariert. Als die replikation wieder syncron war, war es dann ca.00.45 uhr und hab mich dann abgemeldet. Was das rabbit cluster angeht: Der rabbit05 hätte nicht betroffen sein sollen, weil dieser auf einem anderen vmhost läuft und somit nicht von dem Ausfall betroffen war. Wenn, dann hätten nur rabbit043/04 betroffen sein sollen. Zusätzlich sollten wir einen Check bauen der prüft ob alles auf dem rabbit richtig gestartet ist und ansonsten eine mail schreibt. Hätte ich das gestern noch gesehen, hätte ich mich logischer weise auch darum gekümmert. -- Mit freundlichen Grüßen Thomas Kölzow - System Administrator - ________________________________________________________ TraSo GmbH Georg-Schumann-Str. 294 D-04159 Leipzig Tel.: +49 341 909 87 532 E-Mail: t.koelzow@traso.de Internet: http://www.traso.de ________________________________________________________ Geschäftsführer: Haiko Gerdes Handelsregister: Amtsgericht Leipzig, HRB 21850