Guten Morgen. Irgendwas bei der JT cache01 Datenbank ist schief gelaufen. Die cache update-Prozesse haben sich ohne erkennbaren Grund nicht sauber beendet. Ich habe in den logs keinen Fehler gefunden aber die update-Tabelle die von den Prozessen verwendet wird, wurde nicht bereinigt. Das führte dazu, dass beim export und der Anfertigung des snapshots die Festplatte voll gelaufen ist. Tilo musste erst die Platte vergrößern, damit wir die Datenbank neu starten konnten. Danach musste ich einige Sachen bereinigen, damit die repairs durchlaufen konnten. Zu diesem Zeitpunkt habe ich mitbekommen, dass die snapshot Anfragen vom Buchungskern hängen geblieben sind und den Apache auf dem service01 abgeschossen haben. Die cache Datenbnak habe ich darauf hin bei JT deaktiviert und den Apache neu gestartet. Leider kann ich nicht sagen wie lange der Buchungskern davon betroffen war, da müsste S2 mal nachschauen. Ich habe den export jetzt von Hand neu gestartet und hoffe, dass der bis 9Uhr durch ist. Grob geschätzt müsste das aber klappen. Der cache01 ist bei JT wieder aktiviert, leider musste ich aber die snapshot Tabelle löschen, weil die kaputt war. Die ist also leer, wird aber gerade neu erstellt. Die Gründe sind mir wie gesagt unbekannt. Mit dem letzten deployment hängt es wohl nicht zusammen, weil an dieser Stelle nichts geändert wurde und das Problem bei OPD nicht besteht. Sören Am 12.11.2014 um 23:00 schrieb Haiko Gerdes:
Hallo Sören,
ich wollte mir die Updateliste ansehen und habe den Eindruck, dass es bei JT merkwürdig aussieht.
Das bekomme ich, wenn ich die Updateliste aus dem Cache aufrufe:
Der Menüpunkt Updateliste aus dem xAdmin:
- Bringt eine leere Seite
Hast Du eine Ahnung, was da der Hintergrund ist?
Danke
Mit freundlichen Grüßen
Haiko Gerdes - Geschäftsführer - ___________________________________________________________________________ TraSo GmbH Georg-Schumann-Str. 294
D-04159 / Leipzig
Tel.: +49 341 90 98 7 418 // Fax: +49 341 90 98 749
Mobil: +49 172 610 2849
Internet: http://traso.de E-Mail: h.gerdes@traso.de <mailto:h.gerdes@traso.de> ___________________________________________________________________________ Geschäftsführer: Haiko Gerdes Handelsregister: Amtsgericht Leipzig, HRB 21850
-- -- Sören Pestner - Entwickler - TraSo GmbH G.-Schumann-Str. 294 04159 Leipzig telefon: +49 341 909 87 509 email: s.pestner@traso.de Geschäftsführer: Haiko Gerdes Handelsregister: Amtsgericht Leipzig (HRB 21850)
Moin, und danke für die Info! JT hat zwischen 22:00 und 03:00 Uhr 13253 BAs gehabt von denen nur 55 im Timeout (über 12 Sekunden) gelandet sind. Zusammen wurden 10714 BAs (80,8%) "positiv" (also unter 12s und mit positivem ResponseCode) beantwortet. Auf der anderen Seite sehe ich drastische Anstiege der mittleren BA-Laufzeiten zwischen 00:00 Uhr und 07:00 Uhr von 1,26 auf 2,92 Sekunden (peak nach 4 Uhr), die inzwischen wieder abgeflaut sind. => Wenn JT "nicht buchbar" war, dann nur so kurzzeitig, dass es in der statistik nicht auffällt. VG SRK Am 13.11.2014 um 02:00 schrieb Sören Pestner:
Guten Morgen.
Irgendwas bei der JT cache01 Datenbank ist schief gelaufen.
Die cache update-Prozesse haben sich ohne erkennbaren Grund nicht sauber beendet. Ich habe in den logs keinen Fehler gefunden aber die update-Tabelle die von den Prozessen verwendet wird, wurde nicht bereinigt. Das führte dazu, dass beim export und der Anfertigung des snapshots die Festplatte voll gelaufen ist.
Tilo musste erst die Platte vergrößern, damit wir die Datenbank neu starten konnten. Danach musste ich einige Sachen bereinigen, damit die repairs durchlaufen konnten. Zu diesem Zeitpunkt habe ich mitbekommen, dass die snapshot Anfragen vom Buchungskern hängen geblieben sind und den Apache auf dem service01 abgeschossen haben. Die cache Datenbnak habe ich darauf hin bei JT deaktiviert und den Apache neu gestartet. Leider kann ich nicht sagen wie lange der Buchungskern davon betroffen war, da müsste S2 mal nachschauen.
Ich habe den export jetzt von Hand neu gestartet und hoffe, dass der bis 9Uhr durch ist. Grob geschätzt müsste das aber klappen.
Der cache01 ist bei JT wieder aktiviert, leider musste ich aber die snapshot Tabelle löschen, weil die kaputt war. Die ist also leer, wird aber gerade neu erstellt.
Die Gründe sind mir wie gesagt unbekannt. Mit dem letzten deployment hängt es wohl nicht zusammen, weil an dieser Stelle nichts geändert wurde und das Problem bei OPD nicht besteht.
Sören
Am 12.11.2014 um 23:00 schrieb Haiko Gerdes:
Hallo Sören,
ich wollte mir die Updateliste ansehen und habe den Eindruck, dass es bei JT merkwürdig aussieht.
Das bekomme ich, wenn ich die Updateliste aus dem Cache aufrufe:
Der Menüpunkt Updateliste aus dem xAdmin:
- Bringt eine leere Seite
Hast Du eine Ahnung, was da der Hintergrund ist?
Danke
Mit freundlichen Grüßen
Haiko Gerdes - Geschäftsführer - ___________________________________________________________________________ TraSo GmbH Georg-Schumann-Str. 294
D-04159 / Leipzig
Tel.: +49 341 90 98 7 418 // Fax: +49 341 90 98 749
Mobil: +49 172 610 2849
Internet: http://traso.de E-Mail: h.gerdes@traso.de <mailto:h.gerdes@traso.de> ___________________________________________________________________________ Geschäftsführer: Haiko Gerdes Handelsregister: Amtsgericht Leipzig, HRB 21850
-- Mit freundlichen Grüßen Stefan Rank-Kunitz - Lead Developer - ________________________________________________________ TraSo GmbH Georg-Schumann-Str. 294 D-04159 Leipzig Tel.: +49 341 909 87 45 E-Mail: s.rank-kunitz@traso.de Internet: http://www.traso.de ________________________________________________________ Geschäftsführer: Haiko Gerdes Handelsregister: Amtsgericht Leipzig, HRB 21850
participants (2)
-
Stefan Rank Kunitz -
Sören Pestner