Er is op dit moment storing op ons platform. Al onze resources zijn ingezet om deze storing zo snel mogelijk te verhelpen. Dit zal echter enkele uren in beslag nemen.
Wat speelt er?
Sinds gistermiddag, 20 december, 16:00 uur, spelen er een aantal hardnekkige problemen op het platform. Deze problemen hebben dusdanige impact dat het platform hierdoor al enkele uren niet bereikbaar is. Om deze situatie te herstellen zijn we direct overgegaan naar het terugplaatsen van een backup van het platform. Het terugplaatsen van deze backup is echter een ingrijpend proces, en kost tijd. Deze zogenaamde restore draait momenteel en zal naar verwachting nog enkele uren in beslag nemen. Tot die tijd is het platform niet beschikbaar.
Verdere toelichting
Onze ontwikkelaars werden gisteren om 16:02 gewaarschuwd door de monitoring van het platform dat er problemen waren op het platform die impact hadden op de beheeromgevingen, de webwinkels, de Kassa App en de API. Gezien de drukke kerstperiode is er gekozen om allereerst het probleem te mitigeren, zodat alle hierboven genoemde diensten weer snel online waren, alvorens we een definitieve oplossing zouden doorvoeren. Omstreeks 18:00 uur was dit probleem gemitigeerd en was het platform weer online.
Helaas bleek het mitigeren van het probleem onvoldoende, en traden dezelfde symptomen omstreeks 19:25 uur weer op. Ook hier zijn onze ontwikkelaars direct op het herstellen van het probleem gedoken. In plaats van een poging tot het mitigeren van het probleem is er in dit geval een poging gedaan tot het oplossen van de oorzaak. Helaas bleek dit niet mogelijk, waarna het besluit is genomen om alsnog het probleem te mitigeren en dus een tijdelijke oplossing door te voeren. Deze tijdelijke situatie heeft tot de ochtend van 21 december omstreeks 06:00 uur stabiel gedraaid. Sindsdien is het platform onbereikbaar.
We komen later met meer informatie over deze storing, voor nu ligt de volledige focus op het oplossen van deze storing.
EN: There is currently an outage on our platform. All our resources have been deployed to resolve this outage as quickly as possible. However, this will take a few hours.
What's going on?
Since yesterday afternoon, December 20, at 4:00 PM, there are a number of persistent problems on the platform. These problems have had such an impact that the platform has been unavailable for several hours. To rectify this situation, we immediately proceeded to restore a backup of the platform. However, restoring this backup is a major process and takes time. This so-called restore is currently running and is expected to take a few more hours. Until then, the platform will not be available.
Further explanation
Our developers were warned yesterday at 4:02 PM by monitoring the platform that there were problems on the platform that had an impact on the management environments, the webshops, the Kassa App and the API. Given the busy Christmas period, it was decided to, first of all, mitigate the problem, so that all the services mentioned above were back online quickly before we implemented a definitive solution. By 6:00 PM this problem had been mitigated and the platform was back online.
Unfortunately, mitigating the problem proved insufficient, and the same symptoms reappeared at around 7:25 PM. Here too, our developers dived straight into fixing the problem. In this case, instead of an attempt to mitigate the problem, an attempt has been made to solve the cause. Unfortunately, this was not possible, after which the decision was taken to mitigate the problem and implement a temporary solution. This temporary situation remained stable until December 21 around 06:00 AM. Since then, the platform has been unavailable.
We will come later with more information about this outage. For now, the full focus is on solving this outage.
Posted Dec 21, 2022 - 10:23 CET