Categories for Neues

17. September 2020 um 17:47 Uhr

Systeme sind wieder bereit / Systems are ready again

Es laufen nun alle Systeme inklusive Anfragenmanager und Prozessmanager wieder. Die Jobs werden nach und nach abgearbeitet. Eine komplette Entwarnung können wir voraussichtlich am morgigen Tag geben.

Now all systems including the request manager and process manager are running again. The jobs are processed bit by bit. We can probably give a complete all-clear tomorrow.

17. September 2020 um 16:35 Uhr

Systeme wurden wiederhergestellt / Systems were restored

Wir konnten bereits weitere automatische Systeme wiederherstellen und die Restlichen folgen. Voraussichtlich werden der Anfragenmanager und der Prozessmanager im Laufe des Nachmittags wieder gestartet. Bitte beachten Sie, dass bereits gestartete Prozesse gegebenenfalls automatisch weiterlaufen.

We have already been able to restore other automatic systems and the rest will follow. It is expected that the inquiry manager and the process manager will be restarted in the course of the afternoon. Please note that processes already started may continue to run automatically.

17. September 2020 um 13:20 Uhr

Störung besteht weiterhin / Malfunction still exists

Liebe Kunden,

wie Sie sicherlich schon gemerkt haben, läuft unser System wieder an.

Alles, was Sie aktiv nutzen, läuft recht stabil. In der Warteschlange von gestern hängen natürlich sehr viele Jobs, die eine lange Wartezeit zur Folge haben. Hier wird geprüft, ob diese noch ausgeführt werden können. Eine komplette Entwarnung ist dies somit leider noch nicht, aber wir bleiben natürlich dran und halten Sie weiter auf dem Laufenden. Zusammen mit Quobyte arbeiten wir weiter am Storage, der Zugriff darauf funktioniert deutlich besser, vollständig behoben ist das Problem noch nicht.

Es kann nötig sein, dass Sie Ihren Cache einmal leeren müssen.

 

Dear customers,

as you have surely noticed, our system is starting up again.

Everything you actively use is running quite stable. In yesterday’s queue there are of course a lot of jobs hanging in the queue, which results in a long waiting time. Here we check if they can still be executed. Unfortunately, this is not a complete all-clear yet, but we will of course stay on it and keep you informed. Together with Quobyte we continue to work on the storage, the access to it works much better, the problem is not yet completely solved.

It may be necessary to empty your cache once.

17. September 2020 um 09:23 Uhr

Störung besteht weiterhin

Wir arbeiten aktuell weiterhin gemeinsam mit unserem Partner Quobyte an einer Lösung des Problems und haben aktuell leider noch keine Neuigkeiten.

16. September 2020 um 20:54 Uhr

Aktueller Stand

Liebe Kunden,

unser Ausfall am heutigen Tage tut uns sehr leid und wir möchten Sie gerne transparent auf den aktuellen Stand bringen. Wir nutzen ein Speichersystem unseres langjährigen Partners Quobyte (https://www.quobyte.com/). Auf dem Storage-System werden unter anderem alle Bilder, Dokumente usw. gespeichert. Die Daten werden aus Gründen der Ausfallsicherheit auf mehreren Geräten redundant gespeichert um im Falle eines Defektes von einem oder mehreren Speichersystemen weiterhin verfügbar zu sein.

Die Dateien werden dreifach redundant abgelegt. Wenn ein Gerät nicht verfügbar ist, werden sie automatisch von einem Fallback Gerät geladen. Jetzt gibt es aber da einen Softwarefehler im Quobytesystem, so dass weiter auf das ausgefallene Gerät zugegriffen wird. Nach einem Timeout von 10 Sekunden wird die Datei dann erst von einem der beiden anderen Geräte ausgeliefert. Und diese lang laufenden Requests (10 Sekunden extra) überlasten andere Server (Datenbank Cluster, Webserver)

Da es sich bei dem Storage um unser zentrales Speichersystem handelt, lässt sich der Zugriff darauf nicht unterbinden, ohne unser System komplett abzuschalten. Eine Lösung auf unserer Seite ist aktuell leider nicht möglich. Aus dem Grund haben wir uns entschieden, Teile des Systems abzuschalten, um bestimmte Funktionen weiterhin verfügbar zu halten. Aktuell können wir mit Sicherheit sagen, dass automatische Prozesse zum jetzigen Zeitpunkt nicht ablaufen können (dazu gehört auch der Anfragenmanager und die Mailverbuchung) und Portalübertragungen funktionieren leider ebenfalls nicht. Wir gehen davon aus, dass das Problem auch morgen weiterhin bestehen wird und hoffen, dass unser Partner Quobyte eine schnelle Lösung liefern kann. Daran wird aktuell mit Hochdruck gearbeitet.

https://www.quobyte.com/

16. September 2020 um 16:59 Uhr

Störungen auf unseren Datenbankservern

Die Störungen auf den Datenbankservern dauern noch an. Wir arbeiten weiterhin mit Hochdruck an der Lösung des Problems.

15. Juni 2020 um 11:58 Uhr

Hohe Last auf unseren PDF-Servern

Bei der Generierung von PDF-Exposés kommt es gerade zu Wartezeiten, wir arbeiten an einer Lösung

18. Mai 2020 um 11:53 Uhr

Alle Server laufen ohne Probleme / All servers run without problems

Aktuell sind keine Probleme bekannt.

Currently there are no problems.

27. April 2020 um 08:39 Uhr

Alle Server laufen ohne Probleme / All servers run without problems

Aktuell sind keine Probleme bekannt.

Currently there are no problems.

23. April 2020 um 15:36 Uhr

Netzwerkprobleme

Aktuell gibt es Netzwerkprobleme, die die Verfügbarkeit beeinträchtigen. An der Behebung wird gearbeitet.