LL#3 – Liebes Logbuch…

Posted by leah on Tuesday, November 22, 2022

Nachdem es die letzten Monate hoch her ging und viel passiert ist, war der November bei uns bisher etwas ruhiger. Einige Kolleg*innen haben sich eine lang verdiente Auszeit gegönnt und der Rest hat es auch eher etwas ruhiger angehen lassen, damit es bald mit neuer Energie weitergehen kann. Natürlich ist in den letzten Wochen aber trotzdem einiges passiert.

So haben wir jetzt Inhibition für das Monitoring unserer U7 Hosts mit Prometheus und Alertmanager. Das heißt, unser U7-On-Call wird nicht mehr für jeden Service einzeln angeklingelt, wenn ein Host ausfällt, sondern nur noch dafür, dass der Host nicht mehr erreichbar ist. Gleiches gilt auch dafür, wenn eines unserer Rechenzentren ausfällt, dann bekommt unser Operations-On-Call nur noch eine Info darüber, dass das Rechenzentrum nicht mehr erreichbar ist und wird nicht mit hunderten von Alerts geflutet, sodass das Handy nicht mehr stillsteht. Das ist ganz schön anstrengend, wenn man gerade versucht ein Problem zu beheben ;)

Wenn wir schon über die Rechenzentren reden, in FRA3 haben wir neue Switche installiert, nachdem unser alter Hersteller uns seit über 9 Monaten nicht beliefern konnte. Diese testen wir gerade mit drei neuen Proxmox Nodes, die in Zukunft hoffentlich tatkräftig unseren Cluster unterstützen, damit wir mehr Spielraum für die Lastverteilung haben. Außerdem haben wir zwei Server repariert und unsere Consolen Server für das OOB-Managment (Out-of-Band - also unsere Notfall Verbindung) hinter unseren OOB-Host gebaut, nachdem sie in der alten Position immer wieder abgestürzt sind. Vermutlich durch zu viele Portscans, die im Internet auf quasi allen IPs ständig stattfinden.

Unser Entwicklungsteam hat, neben viel Planung für die Zukunft, die Images für Python und Ansible aktualisiert, die wir für das Deployment unserer Dienste via Gitlab CI brauchen. Der Support dagegen ist mit der Aktualisierung unserer Lab Guides von PHP auf Version 8 beschäftigt, die durch anstehende das EOL von PHP-7.4 Ende November notwendig wurde. Dabei können wir vermelden, dass bereits gut die Hälfte der Anleitungen auf den neuesten Stand gebracht wurden. Zudem kümmert sich der Support natürlich wie immer um all eure Fragen, nicht nur in Bezug auf die Umstellung auf PHP 8.

Neben den ganz alltäglichen Arbeiten konnten wir ein Forschungsteam mehrerer Universitäten zum Thema rechtsextreme Memes unterstützen und unsere Erfahrung mit diesen teilen. Das Team war dabei besonders wegen unserer Hausordnung auf uns aufmerksam geworden, mit der wir doch einiges anders machen als viele andere Hoster.

Und da die steigenden Energiekosten nicht nur für unsere Server von Relevanz ist, haben zwei Kolleg*innen eine Balkonsolaranlage in Betrieb genommen und sammeln trotz trübem Wetter schon fleißig Energie.

4 Solarpaneele auf einem Flachdach, auf dem gerade etwas Regen steht. Dahinter ein Garten mit Büschen und Bäumen und einige andere Häuser von denen man aber nur die oberen Stockwerke sieht. Zuletzt noch ein Blick auf unser Projekt euch in Zukunft Videotutorials anzubieten: Unser Prototyp steht auf einem Bein und dreht darauf interne Feedbackschleifen. Wir sind schon gespannt auf eure Meinungen, wenn wir damit soweit sind.

Bis zum nächsten mal, dann wieder mit Jonas.

Leah