Hallo Team, hier noch das Protokoll der nächtlichen Wartungsarbeiten. Spiegelt nur meine Sicht wider, die Admins können da gerne noch ins Detail gehen, falls gewünscht. 23:40 alle INFX Produktionen sind ohne Probleme beendet worden, Freigabe 00:11 Tilo im Büro, sein Laptop hat die WLAN/Ethernet-Hufe hochgerissen, Alex' Rechner mitgenommen 00:53 Anruf, dass es gleich losgeht 00:56 Mail von Tobias an Herrn Hilbert zur fehlenden Nachbarschaftsbeziehung 01:12 IMAP für 5 Minuten offline 01:37 Replikation von LMX im Laufe des Tages kaputt gegangen, Ursache ist wohl der LMX LTS Datenbankabgleich, Tilo schaltet db01 ab und kopiert, dauert ca. 30 Minuten, LMX in dieser Zeit nicht buchbar 01:59 MySQL brauchte bis eben um runterzufahren, Downtime verlängert sich auf 45min 02:10 Webmailer und Ticketsystem offline 02:29 LMX db01 läuft wieder 03:26 massives Problem mit dem propagieren der Routen, Geräte können nicht miteinander kommunizieren 03:33 Fehler gefunden 04:00 alle Server-Verbindungen offline 04:15 das interne Routing zwischen Firewall und HL Router funktioniert, jetzt muss Durchlässigkeit der Firewall sichergestellt werden 04:30 alle Systeme über die neue Firewall und den neuen Stack wieder online, alte Uplinks gezogen 04:50 FERF über Sabre nicht mehr erreichbar (D, I, BA), 254 root@stadis01 /opt/Ferf_Router # wine /opt/Ferf_Router/ToBri.exe -tb fixme:heap:HeapSetInformation (nil) 1 (nil) 0 - Testversion ist abgelaufen 04:57 Tilo hat gezaubert, FERF über Sabre wieder erreichbar 05:00 Juwelix bei LMX abgeschaltet 05:24 service01 LMX sehr langsam, Ursache: Jun 18 17:11:31 service01 kernel: [9402864.531120] NOHZ: local_softirq_pending 100 05:33 alle Systeme offline 05:41 alle Systeme online 05:46 Tests zur Redundanz der Firewall, mit Testszenario 06:47 Redundanz ist gegeben 06:49 Freigabe der Systeme, Tests starten 06:55 D, I und BA bei allen VA OK 07:00 die Startbildschirme aller VA sind extrem lahm 07:10 Verbindung zu TT zusammengebrochen 07:20 Transferlisten, FZU, Flugexporte sind soweit gelaufen, was fehlte, wird von Stefan angeworfen Viele Grüße Carsten -- Mit freundlichen Grüßen Carsten Zinke - xRes Support - ________________________________________________________ activate communication systems GmbH Georg-Schumann-Str. 294 D-04159 Leipzig Tel.: +49 341 90 98 7 45 / Fax: +49 341 90 98 749 E-Mail: c.zinke@activate.de Internet: http://www.activate.de ________________________________________________________ Geschäftsführer: Markus Hartwig, Rainer Jansen Handelsregister: Amtsgericht Leipzig, HRB 21850