blog.bawue.net

Bilder vom Umbau (Teil 1)

Andreas hatte eine Digitalkamera dabei und wir haben diverse Zustände während unserer Umbauaktion letzte Nacht dokumentiert.

Wir haben leider verpasst, ganz am Anfang ein Bild zu machen. Bei folgendem ersten Bild, das das Rack von vorne zeigt, fehlen schon 2 Geräte eine gute halbe Bildschirmhöhe über dem Bildschirm. Auf dem Bild sehen wir von oben nach unten irgendwelche Rittal Rack Management Geräte, 2 Dell Server auf denen die meisten unserer virtuellen Maschinen laufen, eine Lücke in der davor unser erster Router BB1 und unser serieller Consolenserver war, Sysiphus2 (Storage und virtuelle Maschinen), BB2 (unser zweiter momentan aktiver Router), ein Bildschirm mit Tastatur, dahinter in irgendeiner Reihenfolge News (Newsserver), Gonzo (Andreas Server) und Horscht (Storage und virtuelle Maschinen). Unter dem Bildschirm sind unsere beiden neuen Storageserver, auf denen alle Nutzerdaten und fast alle virtuellen Maschinen liegen, die Tape Library für Backups und 2 Mal USV mit Akkus.

Auf der Rückseite ist alles verkabelt, wobei die meisten Kabel viel zu lang sind und damit ein ganz kleines bisschen nach Chaos aussehen. In der Mitte rechts sieht man 2 24-Port 100MBit Switche durchschauen, die wir schon viele viele Jahre nicht mehr nutzen aber auf Grund der vielen Kabel nicht ausbauen konnten.

Hier sieht man ganz links eine Kiste, die am Ende der Nacht mit übrigen Kabeln gefüllt sein wird. Im ersten Rack links sind King und Sysiphus1, beides Server die seit einiger Zeit nicht mehr in Betrieb sind. Im zweiten Rack ist der Switch, der die Aussenanbindung für uns macht (oben, mit den schönen bunten Kabeln) und darunter ein Switch den wir als Ersatzgerät neu angeschafft haben und noch ins Rack einbauen müssen (nach dem Umbau).

Hier sind diverse Geräte verschwunden: Gonzo liegt im Rack vom vorigen Bild und läuft friedlich vor sich hin, News macht dasselbe. Alle virtuellen Maschinen wurden von Horscht auf andere Server migriert und Horscht liegt ausgeschaltet in irgendeiner Ecke. Unsere iSCSI server laufen nicht mehr gespiegelt, das zweite Gerät wurde heruntergefahren und auch irgendwo abgestellt. Das Kabelchaos hinten ist auch schon deutlich übersichtlicher geworden.

Hier ist das Rack fast schon leer, jedenfalls so leer wir wir es am Ende der Nacht zurücklassen werden. Der einzige laufende Rechner ist noch BB1, der die Aussenanbindung macht.

Hier sieht man von vorne nach hinten: Sysiphus2, den wir für einige virtuelle Maschinen brauchen, die lokalen Plattenspeicher nutzen, dann 3 Dell Server, auf denen alle anderen VMs laufen und ganz hinten der Storage Server. Ich finde ja, das Rack war ein Fehlkauf, so ist alles viel übersichtlicher.

Das fast leere Rack von hinten, mit fast keinen Kabeln mehr.

Downtime aller Dienste am 5.1./6.1. [Update^2]

Es steht seit einiger Zeit ein größerer Umbau des Serverschrankes an, den wir voraussichtlich morgen Abend gegen 21:00 Uhr in Angriff nehmen. Wir werden dabei alle Server aus dem Rack ausbauen, die wichtigsten neben dem Rack hinstellen und wieder in Betrieb nehmen, dann das Rack umbauen und danach wieder alle Server einbauen. Beim Ausbau und danach wieder beim Einbau sind kurze Downtimes leider unumgänglich. Wir werden unser bestes geben um sie so kurz wie möglich zu halten.

Während des Umbaus sollten die meisten Dienste zur Verfügung stehen (wir gehen davon aus, alle von Nutzern erreichbaren Dienste anbieten zu können).

Nach diesem "Neujahrsputz" wird das Rack dann neu geordnet erstrahlen, alle Server werden korrekt eingebaut und festgeschraubt sein und wir hoffen, damit für ein paar weitere Jahre Bawue.Net ohne größere Umbauten gerüstet zu sein.

Solltet ihr auf irgendwelche Probleme stoßen, dürft ihr uns gerne im IRC Netzwert IRCnet im Channel #bawue oder per Email an admin@bawue.net um Rat fragen, wir werden alle Anfragen so schnell wir können beantworten.

[Update 1:] Bisher schaut alles recht gut aus. Wir haben die meiste Hardware aus dem Rack ausgebaut und neben das Rack auf den Boden gelegt. Die Server und alle (wichtigen) VMs laufen. Jetzt geht es erstmal ins Bett, bevor morgen dann das gemacht wird, für das wir uns heute die Nacht um die Ohren geschlagen haben: Die Rackschienen richtig einstellen und alles wirder richtig einbauen.

[Update 2:] Da es ja langweilig wäre, sich an Pläne zu halten und da im Laufe des heutigen Tages Hardwareprobleme aufgetreten sind und wir erst morgen an Ersatzteile kommen, werden wir morgen mit dem Rack weitermachen. Dadurch wird es voraussichtlich am 7.1. und evtl. am 8.1. zu weiteren kurzen Ausfällen kommen.

Downtime des IMAP Servers [Update]

Bei Wartungsarbeiten mussten wir heute leider den IMAP/POP3 Server neu booten. Der notwendige Dateisystemcheck dauert leider noch an, daher ist der IMAP/POP3 Server im Moment nicht erreichbar.

Wir bitten die Downtime zu entschuldigen und melden uns hier, sobald wir mehr wissen.

Beid den Wartungsarbeiten handelte es sich um ein Speicherupdate bei unseren beiden neuen Dell Servern. Die hatten bisher 6 GB RAM und haben nur 16 GB. Da die Server von der Hardware her identisch sind hoffen wir in Zukunft bei Wartunsarbeiten virtuelle Maschinen nicht mehr abschalten und neu booten zu müssen sondern einfach im Betrieb auf den anderen Server umziehen zu können.

[Update:] Scheint, als wurde meine Bitte nicht erhört, hier kurz reinzuschreiben, dass sich die Sache erledigt hat. Also, das o.g. Problem besteht seit geraumer Zeit nicht mehr.