d-hosting technische Informationen

Wir möchten Sie hiermit über anstehende Wartungsarbeiten an unserem Standort Alboinkontor informieren.

Es wird im genannten Zeitraum mit einem Ausfall zu rechnen sein.

Bitte entnehmen Sie die Details der nachfolgend angeführten Übersicht.

Von / Start : 04.03.2007 – 08:00:00 Uhr
Bis / End : 04.03.2007 – 11:00:00 Uhr
Ort / Location : Berlin Alboinkontor
Ausfall ca. : 15 – 30 Minuten

geplante Tätigkeiten :
Arbeiten an einem Server-Rack im Alboinkontor. Betroffen davon ist unter anderem ein Mailserver (Dienste pop. und smtp.all.de) und ein Webserver (light.all.de)

Wir möchten Sie hiermit über anstehende Wartungsarbeiten in Frankfurt/Main informieren.

Es wird im genannten Zeitraum mit einem Ausfall zu rechnen sein.

Bitte entnehmen Sie die Details der nachfolgend angeführten Übersicht.

Von / Start : 01.03.2007 – 23:00:00 Uhr
Bis / End : 02.03.2007 – 01:00:00 Uhr
Ort / Location : Frankfurt/Main
Ausfall ca. : 30 Minuten

geplante Tätigkeiten :
Es wird ein Switchtausch vorgenommen.

Wir möchten Sie hiermit über anstehende Wartungsarbeiten an unserem Standort Lützowstraße informieren.

Es wird im genannten Zeitraum mit einem Ausfall zu rechnen sein. Bitte entnehmen Sie die Details der unten angeführten Liste.

Bitte entnehmen Sie die Details der nachfolgend angeführten Übersicht.

Von / Start : 02.03.2007 – 00:00:00 Uhr
Bis / End : 03.03.2007 – 04:00:00 Uhr
Ort / Location : Berlin Lützowstraße
Ausfall ca. : 15 – 30 Minuten (der Ausfall wird nicht vor 02:00 Uhr auftreten)

geplante Tätigkeiten :
- Arbeiten an der Stromversorgung
- Arbeiten an der Backbone-Struktur
- K-Fall-Simulation (Redundanztest von Ausfallsituationen)

Wir bitten diese Unannehmlichkeiten zu entschuldigen und hoffen auf Ihr Verständnis.

Unser Technologiepartner hat uns soeben über anstehende Wartungsarbeiten an Ihrer SDSL-Leitungsanbindung informiert auf die wir keinen Einfluss haben.

Für den Erhalt der Netzstabilität müssen vorbeugende Wartungsarbeiten durchgeführt werden. Es wird im genannten Zeitraum mit einem Ausfall zu rechnen sein.

Wir bitten diese Unannehmlichkeiten zu entschuldigen und hoffen auf Ihr Verständnis.

Von / Start : 20.02.2007 03:00:00
Bis / End : 20.02.2007 05:00:00
Ausfall ca.: 120 Minuten Min.
Ausfallwahrscheinlichkeit 100 %
Art der Arbeit: Konfigurations-Änderungen eines zentralen Netzknotens.

Leider gibt es derzeit massive Störungen bei unseren Mailsystemen, betroffen sind hier vor allem die POP3-Server. Während das versenden über smtp.d-hosting.de inzwischen wieder funktioniert, wird an dem Abholen via POP3 noch gearbeitet.

Auslöser war ein Problem im Mail-Storage, das dortige RAID-System ist defekt bzw. inkonsistent. Derzeit arbeitet die Technik an einem Recovery des RAID-Systems, dies beansprucht jedoch leider noch eine längere Zeit.

Eingehende Mails sollten über mehrere Tage von den einliefernden Servern zwischengelagert werden.

Die Technik hofft, den Normalbetrieb am späten Nachittag wieder herstellen zu können, hier auf dem blog wird es dann weitere Info’s geben.

NACHTRAG (17.00): Der RAID-Recovery Vorgang läuft leider immer noch, parallel dazu wurde ein neues System (Hardware) bereitgestellt auf welchem derzeit die Mailumgebung (Software) eingerichtet wird. Je nach Ausgang des Recoverys wird dann das eine oder andere System wieder produktiv geschaltet. Wir rechnen mit einer Fertigstellung nicht vor morgen früh. Bitte entschuldigen Sie die weiteren Unannehmlichkeiten.

NACHTRAG (Freitag, 13.00): Die Maildienste wurden inzwischen ohne Datenverlust wieder zur Verfügung gestellt. Eine ausführliche Stellungnahme zum Vorfall wird derzeit erarbeitet und den Kunden dann zugestellt.

Da bei den Wartungsarbeiten vom 15.-16.12.06 nicht alle Arbeiten ausgeführt werden konnten, werden in der Nacht vom 22.12.06 zum 23.12.06 in der Zeit von 00:00 bis 04:00 Uhr die restlichen Wartungs- arbeiten vorgenommen.

Folgende Arbeiten sind noch notwendig:

- Upgrade eines Mail & DNS Servers

In dieser Zeit kann es zu mehreren kurzen Unterbrechungen Ihrer Dienste kommen.

Wir bitten, die Unannehmlichkeiten zu entschuldigen.

In der Nacht vom 15.12.06 zum 16.12.06 werden wir in der Zeit von 00:00 bis 04:00 Uhr Wartungsarbeiten durchführen. Eventuelle Nacharbeiten werden in der Nacht vom 16.12.06 zum 17.12.06 in der Zeit von 00:00 bis 04:00 Uhr durchgeführt.

Hierbei werden folgende Arbeiten ausgeführt:
- Upgrade eines Mail & DNS Servers
- Upgrade zweier Switche im Rechenzentrum Luetzowstrasse

In dieser Zeit kann es zu einer Unterbrechung Ihrer Dienste von ca. 15 Minuten kommen.

Redundante Systeme sind nicht betroffen.

Wir bitten, die Unannehmlichkeiten zu entschuldigen

Bezugnehmend auf die Störung vom 21.12.2006 möchten wir wie folgt Stellung nehmen.

Am 21.12.2006 kam es zu einem Speicherüberlauf in einem unserer Core-Switche im Standort Berlin-Lützowstraße. Das Backup-System hat innerhalb kürzester Zeit übernommen, nach wenigen Minuten ist jedoch auf dem Backup-System ein Hardwarefehler aufgetreten.

Durch die unglückliche Kombination dieser beiden Vorfälle (Softwarefehler auf dem Primären und Hardwarefehler auf dem Sekundären Gerät), war sowohl die Analyse als auch die Behebung der Störung nicht trivial.

Eine nachhaltige Lösung schaffte letztendlich eine mittels Kurier gelieferte Ersatzkomponente.

Im Zuge der nächsten Wartungsfenster werden wir dieses Szenario in unsere Ka-Fall Tests mit aufnehmen.

Für eine ausführliche Beschreibung des Vorfalls stehen wir Ihnen gerne persönlich zur Verfügung.
Wir bedauern die für Sie durch die Störung entstandenen Unannehmlichkeiten.

Heute kam es in der Zeit zwischen ca. 10.oo bis 12.oo Uhr zu einer Störung mindestens eines Mail- und DNS-Servers durch den Ausfall einer Glasfaser im Backbone.

Bitte teilen Sie uns exakt mit, welche Störungen Sie ggbfls. in dieser Zeit feststellen konnten, damit wir die korrekte Redundanz der entsprechenden Dienste überprüfen bzw. wiederherstellen können.

Bezugnehmend auf die Störung vom 26.07.2006 möchten wir wie folgt Stellung nehmen.

Am Vormittag des 26.07.2006 kam es zwischen 10:35 Uhr und 10:52 Uhr zu einer Störung des Carriers Cogent Communications. Ein Cogent Router verlor die Verbindung zu teilen des internen Backbones sowie auch einige BGP Sessions zu den Kunden. Dies führte zu großen Paketverlusten und nachfolgend zum Fluten der Routingtabellen der dort und am BCIX angeschlossenen ISP Router. Daraus erfolgte ein Speicherüberlauf diverser Router. Als Grundursache wurde eine fälschlich ausgeführte Wartungsarbeit des Stromversorgers von Cogent angegeben, ohne vorher zu informieren.

Bei der d-hosting war ein Router (FarCIX) betroffen. Das automatische Umrouting hat zwar innerhalb von 3 Minuten zu einer Entlastung geführt aber dann die entsprechende Backupleitung (BER-TRMD01362) überlastet.

Als Sofortmassnahmen wurden ergriffen:
1) Entlastung des Routers FarCIX
2) Kurzfristige Realisierung des für diese Woche geplanten Upgrades der Leitung BER-TRMD01362

Wir bedauern die für Sie durch die Störung entstandenen Unannehmlichkeiten.