En udfordrende uge

Det har været en udfordrende uge for Webmaster.

Søndag brød netværkets mailserver endegyldigt sammen - den var mere end 10 år gammel, og har længe stået foran en udskiftning. Største udfordring har været, at den gerne skulle flyttes ind i det Kubernetes cluster, der kører resten af netværket, men det er en større udfordring og er derfor blevet skubbet igen og igen. Men nu blev det alvor, for den gamle server var helt død, så noget måtte gøres.

Efter et forsøg med et hurtigt hack på en anden server, tog Webmaster en dyb indånding og installerede Mailu i Kubernetes clusteret. Det er et ret ungt Open Source projekt, der har til formål at gøre det nemt at bygge en fuld mailserver med Docker containere - og der findes også et Helm chart til installation i netop Kubernets. Webmaster har tidligere kigget på netop dette projekt og blandet sig i det, men det har hidtil været frygteligt umodent og lavet ulykker med Kubernetes, så den store lyst til at installere det for alvor har ikke været til stede.

Men nu skulle det være: De værste bugs er efterhånden luget ud af Mailu, så det fik chancen; og det var godt. På et par timer var en ny mailserver oppe at køre, komplet med antispam, virustester, DKIM, DMARC, SPF, webmail og andet godt (der skal meget til at køre en moderne mailserver) - og det virkede. Næsten. Efter nogle få bugrettelser kom det dog til at køre, og det har det gjort siden. Det er faktisk ret imponerende, så Webmaster er ret godt tilfreds. Nu skal der luses flere bugs, og de skal videregives til projektet, så andre forhåbentligt også kan få glæde af rettelserne.

Desværre har det vist sig, at Sporskiftet ikke er meget for at snakke med den nye mailserver, og derfor ikke kan sende mail i øjeblikket. Webmaster er blevet opmærksom på problemet, og er straks gået i gang med at fejlrette.

Men det skulle ikke være det hele: Torsdag brød databasen ned, og det påvirkede igen Sporskiftet. Så vidt vides har det på ingen måde relation til problemerne med mailserveren, men løses skulle det jo. Databaseserveren kører MariaDB i et Galera cluster, og det har ellers kørt aldeles stabilt de sidste 2-3 år. Ikke desto mindre brød alle tre instanser ned, og en af serverne stod med en delvis opdatering fra Ubuntu, så sandsynligvis er det en fejlet automatopdatering fra Ubuntu, der er gået galt.

Det blev dog også fikset, så nu skulle databasen gerne køre stabilt mange år frem igen.