De acht-wekelijkse software update ronde van de hosting omgeving vindt plaats in de periode 5–8 december.
De highlights zijn:
Op dinsdag 1 november zullen de OpenShift nodes worden gereboot.
Vanwege een recent bekend geworden kwetsbaarheid in de nginx webserver is deze in de NPO hosting omgeving ge-update naar de nieuwste versie (1.23.2) waarin deze kwetsbaarheid verholpen is. Ook voor het Community Hosting Platform zijn nieuwe images beschikbaar. Indien u gebruik maakt van de ngx_http_mp4_module adviseren wij te updaten naar de nieuwe versie.
In de periode van 12 oktober – 1 november 2022 vindt er onderhoud plaats aan de NPO hosting omgeving. Om, als onderdeel van regulier onderhoud, een nieuwe linux kernel actief te kunnen maken wordt het merendeel van de hosting servers gereboot. Dit kan in de meeste gevallen zonder impact op de dienstverlening. De appcluster, testcluster en mediacluster upload servers alsmede non-loadbalanced appcluster diensten zullen wel enige impact ondervinden. Om de overlast daarvan te minimaliseren worden deze reboots buiten kantoortijden uitgevoerd. Alle andere reboots vinden overdag plaats. Van uw kant is verder geen actie vereist.
Op woensdag 19 oktober overdag en in de nacht van 19 op 20 oktober wordt er onderhoud gepleegd aan de NPO hosting storage omgeving. Gevolg hiervan is dat tussen 1:00 en 3:00 uur de hosting omgeving een aantal maal enkele minuten een iets tragere storage zal ervaren, waardoor websites in het appcluster misschien even haperen.
De acht-wekelijkse software update ronde van de hosting omgeving vindt plaats in de periode 10–13 oktober.
De highlights zijn:
Op dinsdag 13 september zullen we het OpenShift cluster upgraden van 4.9 naar 4.10 lees verder
De acht-wekelijkse software update ronde van de hosting omgeving vindt plaats in de periode 15–18 augustus.
De highlights zijn:
Op donderdag 1 september 2022 zullen we het ClusterLogging component van het OpenShift cluster gaan updaten van versie 5.2 naar versie 5.5. Dit is onder andere vereist voor een aanstaande update van OpenShift 4.9 naar OpenShift 4.10. De update zal beginnen om 08:00 ’s ochtends en naar verwachting de rest van de ochtend in beslag nemen.
Als onderdeel van de update zal het hele ClusterLogging component opnieuw worden uitgerold. Tijdens het testen hiervan op ons testcluster hebben we gezien dat daarbij logging data bewaard is gebleven. De update heeft geen impact op de draaiende workloads of de OpenShift console of API. Enkel de logging zal gedurende de update verminderd of niet beschikbaar zijn.
Op donderdag 18 augustus om 08:00 gaan we de storage van de Master Nodes aanpassen.
Ter voorbereiding van de OpenShift 4.10 upgrade hebben we van Red Hat het advies gekregen om aanpassingen te doen aan het aantal IOPS van de onderliggende storage van de Master Nodes, deze zullen tijdens het onderhoud worden opgehoogd.
Het aanpassen van de storage is getest in een aparte omgeving en kan zonder downtime van de Master nodes plaatsvinden. Het onderhoud zal naar schatting 30 minuten in beslag nemen.
De acht-wekelijkse software update ronde van de hosting omgeving vindt plaats in de periode 4–7 juli.
De highlights zijn:
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 9–12 mei.
De highlights zijn:
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 11–14 april.
De highlights zijn:
Op donderdag 31 maart om 08:00 gaan we sso.npohosting.nl en registry.npohosting.nl migreren. lees verder
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 14–17 maart.
De highlights zijn:
Op woensdag 9 maart zullen we het OpenShift cluster upgraden van 4.8 naar 4.9 lees verder
In de nacht van dinsdag 1 maart op woensdag 2 maart wordt er onderhoud gepleegd aan de NPO hosting storage omgeving. Gevolg hiervan is dat tussen 1:00 en 3:00 uur de hosting omgeving een aantal maal enkele minuten een iets tragere storage zal ervaren, waardoor websites misschien even haperen. lees verder
Op dit moment (14-2-2022) ervaren we in sommige gevallen flinke vertraging in de aflevering van e-mail berichten naar mailboxen die ondergebracht zijn bij Microsoft in het “Exchange Online” of “Office 365” platform. Wij zijn in contact met Microsoft, maar dit verloopt erg moeizaam waardoor er op dit moment nog geen zicht op een oplostijd is. lees verder
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 14–17 februari.
De highlights zijn:
Op donderdag 10 februari zullen we de OpenShift Storage en Logging componenten updaten. lees verder
In de week van 10 – 14 januari voeren wij updates door aan de authoritative DNS servers. Tijdens de werkzaamheden zal er geen impact zijn op de dienstverlening.
Tijdens deze werkzaamheden voeren we standaard updates van de software door en wordt de configuratie bijgewerkt. lees verder
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 6–9 december.
De highlights zijn:
Op dinsdag 4 januari zal het OpenShift cluster worden geupdate van OpenShift 4.8.18 naar OpenShift 4.8.24 lees verder
Op woensdag 22 december zullen de OpenShift nodes gereboot worden. Lees meer.
Iedereen die het nieuws een beetje gevolgd heeft, zal het niet ontgaan zijn dat er recent een probleem ontdekt is in een veelgebruikte java library, genaamd log4j. Zowel het Appcluster als CHP zijn veilig en hebben geen noemenswaardig risico gelopen. Log4j wordt wel in een aantal projecten gebruikt, maar deze zijn inmiddels gepatched en/of er zijn workarounds actief om de exploit onschadelijk te maken. lees verder
Op 8 en 9 december wordt er onderhoud gepleegd aan de NPO storage omgeving. Een aantal storage servers worden van nieuwe firmware voorzien. Dit onderhoud zal naar verwachting geen merkbare impact hebben. lees verder
Op 8 december 2021 gaan we onderhoud uitvoeren op de Master Nodes van het OpenShift 4 cluster. We gaan deze Nodes voorzien van meer resources. Tijdens het onderhoud zullen de Master Nodes een voor een offline worden gehaald, omdat we 3 Master Nodes hebben zal de impact hiervan minimaal zijn en het cluster zal gewoon door blijven draoien.
Het onderhoud zal om 04:30 beginnen en zal naar verwachting ongeveer een uur duren. Tijdens het onderhoud kan het zijn dat de console of de api traag of niet reageren.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 6–9 december.
De highlights zijn:
Op dinsdag 16 november overdag en in de nacht van 16 op 17 november wordt er onderhoud gepleegd aan de NPO hosting storage omgeving. Gevolg hiervan is dat tussen 1:00 en 3:00 uur de hosting omgeving een aantal maal enkele minuten een iets tragere storage zal ervaren, waardoor websites misschien even haperen. lees verder
Op woensdag 17 november zal het OpenShift cluster worden geupdate van OpenShift 4.7 naar OpenShift 4.8. lees verder
In de periode van 15–29 november vindt er onderhoud plaats aan de NPO hosting omgeving. Om, als onderdeel van regulier onderhoud, een nieuwe linux kernel actief te kunnen maken wordt het merendeel van de hosting servers gereboot. Dit kan in de meeste gevallen zonder impact op de dienstverlening. De appcluster en testcluster upload servers zullen wel enige impact ondervinden. Om de overlast daarvan te minimaliseren worden deze reboots buiten kantoortijden uitgevoerd. Alle andere reboots vinden overdag plaats. Van uw kant is verder geen actie vereist. lees verder
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 8–11 november.
De highlights zijn:
Op woensdag 27 oktober zullen we de OpenShift Clusterlogging en Container Storage upgrade. lees verder
In de nacht van 21 op 22 oktober wordt er tussen 1:00AM en 3:00AM onderhoud gepleegd aan delen van de NPO hosting omgeving. Eerst wordt een hosting blade enclosure aangesloten op de nieuwe netwerk aggregatielaag, als dat slaagt worden daaraansluitend de hosting serverinstances, zowel redundant (webservers) als non-redundant (databases) weer terugverhuisd naar dit blade enclosure. lees verder
Na de vorige aankondiging, verwachtten we niet weer met eenzelfde soort bericht over de brug te moeten komen. Maar toch: Op 20 oktober 2021 hebben we last gehad van een verstoring rond het middaguur, die begon rond 12:02 en eindigde rond 12:08. Enkele omgevingen hebben er langer last van gehad en behoefden een herstart alvorens ze weer naar behoren werkten. Deze storing was het gevolg van de aangekondigde netwerkwijziging waarbij packets in een loop belandden en de routing engine overbelast raakte. Wederom onze excuses voor de overlast die daardoor is ontstaan. Hieronder proberen we duidelijkheid te schetsen over de oorzaak, de gevolgen en de vervolgstappen. lees verder
In de nacht van 19 op 20 oktober wordt er tussen 1:00AM en 3:00AM onderhoud gepleegd aan delen van de NPO hosting omgeving. Databases worden verplaatst naar een ander hosting enclosure. Gevolg hiervan is dat connecties met databases kortstondig verbroken worden, waardoor websites even kunnen haperen. Eerder op de dag worden als redundante zaken als webservers en applicatieservers verplaatst. Omdat die geloadbalanced zijn heeft dat geen merkbare impact. lees verder
Het zal weinigen zijn ontgaan dat we in de ochtend van 18 oktober 2021 last hadden van een flinke verstoring aan het Appcluster, met als gevolg problemen voor veel op die omgeving gehoste websites en applicaties. Deze storing is afgelopen nacht rond 4:30 uur ontstaan na de aangekondigde netwerkwijziging waarbij per abuis dubbele ID’s zijn uitgegeven. Mijn welgemeende excuses voor de overlast die daardoor is ontstaan. In onderstaande tekst proberen we duidelijkheid te schetsen over de oorzaak, de gevolgen en de vervolgstappen. lees verder
In de nachten van 17 op 18 en 19 op 20 oktober wordt er tussen 4:00AM en 7:00AM onderhoud gepleegd aan delen van het NPO netwerk. Gevolg hiervan is dat een deel van de NPO hosting omgeving gedurende 30-60 sec geen netwerkconnectiviteit heeft, waardoor websites even kunnen haperen.
In de nacht van 13 op 14 oktober heeft er een verstoring plaatsgevonden waardoor websites in het appcluster om 2:17AM ongeveer 45 seconden niet bereikbaar zijn geweest. Sites die in CHP draaien hebben geen impact gehad.
In de software update ronde van oktober zit ook een update van openssh naar versie 8.8. In deze versie wordt een ouder en onveilig algoritme (RSA SHA-1) gedisabled. Het gevolg kan zijn dat je met oude keys niet meer kan inloggen, of geen uitgaande ssh sessies naar bv bitbucket kan doen. Lees hier hoe je nieuwe keys kan aanmaken om weer in te kunnen loggen.
In de nachten van 17 op 18, 19 op 20 en 24 op 25 oktober 2021 wordt er tussen 2:00AM en 4:00AM onderhoud gepleegd aan de NPO storage omgeving. Gevolg hiervan is dat de hosting omgeving eenmalig gedurende enkele minuten een tragere storage zal ervaren, waardoor websites misschien even haperen.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 11–14 oktober.
De highlights zijn:
Op donderdag 7 oktober zal het OpenShift 4.7 cluster worden geupdate naar OpenShift 4.7.31. Deze upgrades zullen geen impact hebben op de draaiende workloads. De Webconsole en API kunnen beperkt beschikbaar zijn.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 13–16 september.
De highlights zijn:
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 16–19 augustus.
De highlights zijn:
Wij zijn tot de ontdekking gekomen dat de Clusterlogging in OpenShift niet gelijk is geupdatet met de rest van het OpenShift cluster. Hierdoor zit de Clusterlogging nog op versie 4.4, in plaats van de laatst beschikbare versie van Clusterlogging, namelijk 5.
Officieel is de route om te updaten 4.4 → 4.5 → 4.6 → 5.0, echter de update naar 4.5 is niet meer beschikbaar en daardoor moeten we van 4.4 direct naar 4.6. Deze upgrade stap hebben we wel uitgebreid getest maar wordt officieel niet door de leverancier ondersteund. De update van 4.4 naar 4.6 zullen we uitvoeren op woensdag 14 juli 2021. Een week later, op woensdag 21 juli, zullen we de upgrade van 4.6 naar 5.0 uitvoeren.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 5–8 juli.
De highlights zijn:
Op donderdag 24 juni zal het OpenShift 4.6 cluster worden geupdate naar OpenShift 4.7. Deze upgrades zullen geen impact hebben op de draaiende workloads. De Webconsole en API kunnen beperkt beschikbaar zijn.
Op donderdag 10 juni zal het OpenShift 4.6 cluster worden geupdate naar OpenShift 4.6.29. Deze upgrades zullen geen impact hebben op de draaiende workloads. De Webconsole en API kunnen beperkt beschikbaar zijn.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 7–10 juni.
De highlights zijn:
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 10–12 mei.
De highlights zijn:
Op woensdag 21 april zal het OpenShift 4.6 cluster worden geupdate naar OpenShift 4.6.21. Deze upgrades zullen geen impact hebben op de draaiende workloads. De Webconsole en API kunnen beperkt beschikbaar zijn.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 12–15 april.
De highlights zijn:
Omdat er een “high severity” kwetsbaarheid in de OpenSSL library is gevonden zullen we in de loop van donderdag 25 maart updates op nginx, apache, bind, unbound, postfix, ssh en icecast uitvoeren welke gebruik maken van deze library. De updates hebben geen impact op de dienstverlening en er is aan uw kant geen actie vereist.
Op donderdag 11 maart 2021 willen we een update doen aan de configuratie van de OpenShift 4 nodes. Deze aanpassing moet voorkomen dat de nodes vol lopen met ongebruikte images en heeft geen verdere impact op het gebruik van het cluster.
Voor het doorvoeren van de aanpassing zullen alle nodes worden herstart. Dit zal een voor een gebeuren en de workloads op deze nodes zullen worden verplaatst naar andere nodes, en daarom ook worden herstart. De update begint om 8:00 's ochtends en zal naar verwachting door de hele dag heen lopen.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 15–18 maart.
De highlights zijn:
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 15–18 februari.
De highlights zijn:
Op woensdag 10 februari zal het OpenShift 4.5 cluster worden geupdate naar OpenShift 4.6. Deze upgrades zullen geen impact hebben op de draaiende workloads. De Webconsole en API kunnen beperkt beschikbaar zijn.
In sudo is een kwetsbaarheid gevonden waardoor het voor kwaadwillenden mogelijk is om root (superuser) te worden. In verband met het urgente karakter van deze kwetsbaarheid is er op de NPO Hosting systemen versneld een patch uitgerold waarmee het probleem opgelost is.
De maandelijkse software update ronde van de hosting omgeving vindt plaats in de periode 18–21 januari.
De highlights zijn: