Uptime 13 days 17 hours 8 minutes 52 seconds
* Maintenance outages are ignored
Uptime 250 days 16 hours 35 minutes 54 seconds
* Maintenance outages are ignored
Uptime 250 days 16 hours 35 minutes 54 seconds
* Maintenance outages are ignored
Uptime 250 days 16 hours 35 minutes 55 seconds
* Maintenance outages are ignored
Resolved | Mar 10, 2023 | 11:08 GMT+01:00
Het probleem wordt veroorzaakt door een defecte disk. De disk is op zo'n manier defect, dat het lees- en schrijfacties op de storageserver blokkeert. Hierdoor kan de functionaliteit niet automatisch worden overgenomen door een reservedisk.
De schijf is uit productie genomen en wordt door een spare vervangen. Hierna kan de omgeving weer lees- en schrijfacties maken naar de storage server.
Monitoring | Mar 10, 2023 | 11:07 GMT+01:00
De omgevingen zijn nu up-and-running. We houden de omgevingen nog even in de gaten.
Resolution in progress | Mar 10, 2023 | 11:02 GMT+01:00
We zijn in direct contact met de engineers en waren net in gesprek het volgende te berichten:
"Het probleem wordt veroorzaakt door een defecte disk. De disk is op zo'n manier defect, dat het lees- en schrijfacties op de storage server blokkeert. Hierdoor kan de functionaliteit niet automatisch worden overgenomen door een reservedisk.
De disk wordt nu door de systeembeheerders on-site handmatig vervangen."
Na het vervangen van de disc zal het proces sneller moeten gaan.
Resolution in progress | Mar 10, 2023 | 10:10 GMT+01:00
De status is nog niet veranderd. De engineers van onze hosting partij zijn nog bezig met het oplossen van het probleem. We kunnen helaas geen indicatie van geven, maar we proberen hier zo spoedig mogelijk te berichten.
Excuses voor dit ongemak.
Resolution in progress | Mar 10, 2023 | 09:24 GMT+01:00
De engineers van onze hostingpartij hebben de oorzaak van het probleem gevonden en werken nu aan een oplossing.
Open | Mar 10, 2023 | 09:22 GMT+01:00
Op dit moment is de omgeving niet bereikbaar door een probleem met de storageserver waarop deze gehost is. De systeembeheerders van het hostingbedrijf werken hard aan een oplossing en doen hun uiterste best om jouw omgeving zo snel mogelijk weer online te brengen.
Resolved | Dec 31, 2022 | 11:20 GMT+01:00
/ Afmelding
31 december 202202:59
We zijn weer online!
Eerder deze nacht meldden de monitoringssystemen van onze hosting provider een probleem met het chassis van de hypervisor waarop 1 van onze servers draait.
Na een eerste analyse van het probleem bleek dat het chassis niet op afstand bereikt kon worden, daarom hebben de engineers de situatie op locatie beoordeeld.
Verdere analyse van dit incident wijst erop dat dit probleem werd veroorzaakt door een probleem met de firmware van één van de CMC's van het chassis. Omdat die nu is teruggedraaid is de situatie gestabiliseerd.
We zullen de omstandigheden die hebben geleid tot dit incident onderzoeken en dit chassis binnenkort vervangen. Daarnaast bieden nogmaals onze excuses aan voor de overlast.
Identified | Dec 31, 2022 | 01:30 GMT+01:00
/ Update #2
31 december 202202:02
Het chassis is weer online en de hypervisors met daarop de servers worden één voor één gestart.
We houden je op de hoogte.
Update #1
31 december 2022 01:19
Het chassis kan niet op afstand bereikt worden. De situatie wordt nu op locatie beoordeeld. Zodra er meer bekend is laten we het weten.
/ Aanmelding
31 december 2022 00:35
Op dit moment is 1 van onze servers niet bereikbaar door een probleem met het chassis van de hypervisor waarop deze draait. Onze engineers doen hun uiterste best om deze machine zo snel mogelijk weer online te brengen.
Over uiterlijk 30 minuten plaatsen we een statusupdate op deze pagina. Onze excuses voor de overlast.
Started:
Ended:
Length:
Monitor: Database/Backend services
Started:
Ended:
Length:
Monitor: Database/Backend services
Started:
Ended:
Length:
Monitor: Database/Backend services
Started:
Ended:
Length:
Monitor: Web
Started:
Ended:
Length:
Monitor: Database/Backend services
Je hebt vanmorgen mogelijk hinder ondervonden van verkeer dat via de load balancer gerouteerd wordt. Loadbalancers in 1 van onze datacenters ondervonden vanmorgen namelijk te veel latency. Dit was het gevolg van wijzigingen die tijdens het onderhoud van gisternacht zijn uitgevoerd. Na het onderhoud hebben de engineers van onze hosting partij diverse succesvolle tests gedaan met de nieuwe configuratie. Echter bleek de hogere load die de load balancer overdag krijgt toch te veel latency te veroorzaken, waardoor de load balancer tijdelijk niet stabiel functioneerde. De wijziging is teruggedraaid en het platform is hierdoor opnieuw stabiel.
Wij gaan de opgetreden te hoge latency daarnaast verder onderzoeken zodat we herhaling kunnen voorkomen.
Onze excuses voor het ondervonden ongemak.
Comment posted
Onze monitoringsystemen geven aan dat de omgevingen weer werken. We hebben nog geen officiële terugkoppeling ontvangen van de hosting provider. Zodra we deze hebben, zullen we dat hier kenbaar maken.
Comment posted
De engineers van onze hosting partij geven aan dat ze het probleem hebben gelokaliseerd. Dit heeft te maken met de wijziging die afgelopen nacht aan de load balancer heeft plaatsgevonden. De wijziging wordt op dit moment ongedaan gemaakt.
Comment posted
We hebben melding gemaakt bij onze hosting partij. Ze zijn er as-we-speak mee bezig
Comment posted