Update Freitag, 13. April 2012:
Seit 13:00 Uhr haben wir wieder einen vollständigen Mailspool.
Ihr könnt alle DIenste jetzt wieder wie gewohnt nutze.
Solltet Ihr irgendwelche Probleme entdecken, so schreibt bitte eine Mail an admin@bawue.net oder kontaktiert uns im IRC.
Eine genauere Erklärung des Ausfalls erfolgt in den nächsten Tagen.
Update: Der Mailserver wird ab jetzt (Donnerstag, 12:00 Uhr) unerreichbar sein, während wir das Backup einspielen.
Anschliessend sollten wieder alle Mails ohne Verlust verfügbar sein.
UPDATE: Wie es aussieht, haben wir eine aktuelle Kopie der Daten auf dem Filer gefunden. Wir prüfen dies im Moment.
UPDATE:
Wir haben mittlerweile den Mailserver wieder aktiviert, jedoch auf einer anderen IP.
Unter mail-temp.bawue.net/193.7.176.99 ist IMAP, IMAPS, POP3 und POP3S verfügbar. Wie der Name sagt, ist dies rein temporär.
Alternativ geht auch der Webmail Zugang unter <https://webmail.bawue.net> oder <https://my.bawue.net/squirrelmail2/>.
Eine Zusammenfassung der aktuellen Probleme:
Die aktuellen Ausfälle beim bawue.net sind eine Spätfolge der am Osterwochenende stattgefundenen Arbeiten an der Stromversorgung: Wir haben wir gerade mit einem merkwürdigen Problem der Datenspeicher zu kämpfen: Manche, aber nicht alle unsere Server haben nach der Wiederherstellung der Stromversorgung plötzlich den Datenstand von Anfang Februar.
Die Webserver selber sind davon betroffen, nicht aber die Userdaten/Webseiten und Datenbanken. D.h. Konfigurationsänderungen am Webserver sind verloren, Webseiten selber nicht.
Die Webseiten sollten alle seit Sonntag abend wieder verfügbar sein.
Leider ist auch der Mailserver betroffen. Das System ist aktuell, aber der Mailspool, also die Mails sind auf dem Stand 4. Februar 2012.
Wir sind im Moment dabei, alle Daten von den zentralen Datenspeichern wegzumigrieren, damit wir diese genauer untersuchen können ohne weitere Ausfälle zu provozieren.
Unser Problem ist nun, dass die wir die Mailserver in Betrieb nehmen können aber dann Mails zwischen dem 4. Februar und dem 9. April "fehlen".
Lokal bei Euch sind diese Mails noch verfügbar, werden beim ersten Kontakt mit dem Mailserver jedoch gelöscht.
Insofern würde ich Euch empfehlen, eine Sicherheitskopie des Datenbestandes Eures lokalen Mailclients anzulegen.
Da wir aber dies nicht an alle unsere Benutzer kommunizieren konnten, zögern wir noch, die Mailserver wieder komplett in Betrieb zu nehmen.
Wir haben allerdings Übergangslösung im Angebot:
Auf einer anderen IP Adresse/einem anderen Hostnamen könnt Ihr auf Eure Mails zugreifen, unter der Prämisse, dass ihr wisst, dass dies evtl. lokal gespeicherte Mails löschen kann.
Wenn Ihr das möchtet, so sagt bitte kurz Bescheid und wir werden das dann entsprechend für Euch einrichten.
Erreichbar sind die Admins im IRC Netz auf dem Channel #bawue. Webchat. Ersatzweise geht auch eine eMail an admin@bawue.net.
UPDATE: Wir bewegen gerade die "frischen" Daten andere Maschinen, damit wir gefahrlos uns die Filer genauer anschauen können.
Sobald dies geschehen ist, sind die Webserver wieder verfügbar.
Als Hinweis an die User: Bitte erstellt eine Kopie des Mail-Folders Eures eMail Clients. So können die Mails, die Ihr noch lokal habt nicht verlorengehen sobald Ihr unseren Mailserver mit den alten Daten kontaktiert. Bei Fragen helfen wir Euch gerne über den Webchat.
Im Zusammenhang mit den angekündigten Arbeiten an der Stromversorgung am Osterwochenende ist leider ein Problem mit den zentralen Datenspeichern aufgetreten.
Im Laufe der Arbeiten wurden am Sonntag Abend die zwei zentralen Datenspeicher neu gestartet.
Abschliessend fiel auf, dass einzelne Systeme plötzlich auf dem Stand von ende Januar oder anfang Februar sind.
Wir sind gerade dabei herauszufinden, was hier los ist und dann zu versuchen den Fehler zu beheben.
Aktueller Stand ist:
- Sämtliche Datenbanken sind aktuell
- Sämtliche Daten von Benutzern (Homedirs, Webseiten) sind aktuell
- IMAP/Mail Spool ist Stand 4. Februar 2012
- Systempartition vom Mailserver ist aktuell.
- Systempartitionen von Webservern und Shellservern sind Stand Februar.
Aktuell ist der Mailserver abgeschaltet, damit Ihr Eure lokal noch vorhandenen Mails nicht beim nächsten Sync verliert.
Webseiten funktionieren mit Ausnahme derer, deren Konfiguration zwischen Februar und April 2012 geändert wurde.
Erreichbar sind die Admins im IRC Netz auf dem Channel #bawue. Webchat.
