Storingsupdate:
Oorzaken, maatregelen en wat dit voor jou betekent

De afgelopen weken hebben we bij NOMAXX Hosting te maken gehad met twee onverwachte storingen op 15 en 20 augustus 2024, die de bereikbaarheid van onze diensten tijdelijk hebben beïnvloed. We begrijpen dat dit ongemak heeft veroorzaakt, en daarom willen we graag transparant zijn over wat er is gebeurd, welke stappen we nu ondernemen om dit in de toekomst te voorkomen, en wat dit voor jou als klant betekent. Bij NOMAXX Hosting staat de veiligheid en betrouwbaarheid van onze diensten altijd voorop, en we blijven ons inzetten voor optimale service.

Beschrijving van de incidenten.

Op 15 augustus vond de eerste storing plaats toen een beschadigde netwerkkabel moest worden vervangen. Extern personeel dat hiervoor werd ingeschakeld, sloot per ongeluk een verkeerde kabel aan tussen twee switches. Hierdoor werden beide storage-platformen onbereikbaar, wat leidde tot een tijdelijke uitval van onze diensten. De situatie werd binnen enkele uren hersteld, maar enkele servers hadden extra tijd nodig om weer volledig operationeel te zijn.

Op 20 augustus trad de tweede storing op toen een switch, die de verbindingen naar de servers verzorgde, onverwacht uitviel. Normaal gesproken zou een tweede switch dit automatisch moeten overnemen, maar dit gebeurde niet zoals verwacht. Dit leidde tot een korte onderbreking van de diensten. Ook hier moesten enkele servers handmatig worden hersteld, wat iets langer duurde.

Beide incidenten hebben een impact gehad op de bereikbaarheid van onze diensten, maar de veiligheid van jouw data is nooit in gevaar geweest. We nemen deze storingen zeer serieus en hebben direct maatregelen getroffen om herhaling te voorkomen.

Storingsupdate 15 en 20 aug 2024

Opbouw van ons hosting/cloudplatform.

Voordat we ingaan op de specifieke gevolgen van de storingen voor jou als klant, is het belangrijk om te begrijpen hoe ons cloudplatform is opgebouwd. Ons platform is ontworpen met redundantie en betrouwbaarheid in gedachten. De rekenkracht (CPU en geheugen) wordt geleverd door een netwerk van hypervisor-servers, die via netwerkkabels en switches zijn verbonden met twee aparte storage-platformen. Elk bestand en elke e-mail binnen jouw hostingpakket wordt achtvoudig opgeslagen op verschillende schijven en servers, wat betekent dat er altijd een back-up klaarstaat als er iets misgaat.

Dankzij deze robuuste opzet was 98% van onze klanten tijdens de recente storingen niet getroffen door uitval. Voor het kleine percentage dat wel hinder heeft ondervonden, waren de gevolgen helaas merkbaar. Hieronder bespreken we wat er precies gebeurde en welke nadelen dit voor jou als klant heeft opgeleverd.

Gevolgen voor de klanten.

Ondanks de robuuste opbouw van ons hostingplatform, waarbij 98% van onze klanten tijdens de storingen geen hinder heeft ondervonden, waren er helaas enkele klanten die wel impact voelden. De storingen op 15 en 20 augustus zorgden voor de tijdelijke onbereikbaarheid van bepaalde websites en e-maildiensten. Dit leidde ertoe dat een klein aantal klanten gedurende enkele uren geen toegang had tot hun diensten. Deze onderbreking had nadelige gevolgen, zoals:

  • Tijdelijk geen toegang tot websites en e-mail.
  • Verlengde hersteltijden voor enkele servers.
  • Vertraging in de communicatie over de status van de storingen.


Hoewel we er alles aan doen om de impact van dergelijke incidenten te minimaliseren, erkennen we de frustratie die dit kan hebben veroorzaakt. We hebben inmiddels maatregelen genomen om toekomstige incidenten sneller op te lossen en de communicatie hierover te verbeteren.

Maatregelen en verbeteringeng

Na de recente storingen hebben we bij NOMAXX Hosting, samen met onze leveranciers, diverse maatregelen genomen om herhaling te voorkomen en de impact van eventuele toekomstige incidenten te minimaliseren. Hier is een overzicht van de belangrijkste stappen:

Maatregelen van onze leveranciers:

  1. Gebruik van eigen personeel: Voortaan wordt alleen nog eigen personeel ingezet voor risicovolle operaties in het datacenter.
  2. Striktere procedures: High-risk operaties worden voortaan stap-voor-stap uitgevoerd met functionele controles na elke stap.
  3. Redundancy-controle: Alle switches, powersupplies en servers worden gecontroleerd om te garanderen dat de redundancy in orde is.
  4. Oorzaakanalyse: Onderzoek naar de oorzaken van de switch-uitval en waarom bepaalde hypervisor-servers de defecte verbindingen actief hielden, wordt uitgevoerd.
  5. Verbeterde failover-capaciteit: Meer hypervisor-servers worden in “standby modus” gehouden om sneller te kunnen reageren bij incidenten.
  6. Herziening van instructies: Instructies en templates worden aangepast om risico’s tijdens de uitvoering beter op te vangen.
  7. Betere communicatie: De communicatie met klanten via statuspagina, Slack en e-mail wordt verbeterd, met meer openheid en geschatte oplossingstijden tijdens storingen.
  8. Onderzoek naar verbeterde redundantie: Er wordt gekeken naar hoe de betrouwbaarheid en redundancy van het cloudplatform verder kan worden vergroot.
  9. Alternatieve herstelmethoden: Onderzoek naar snellere manieren om storage-incidenten te herstellen.

 

Maatregelen van NOMAXX Hosting:

  1. Nieuwe statuspagina: We ontwikkelen een statuspagina waarop klanten real-time updates kunnen zien over de status van onze diensten.
  2. Storingsprotocol: We stellen een storingsprotocol op voor intern gebruik, zodat ons team jou als klant snel en duidelijk kan informeren via telefoon, chat en e-mail.
  3. Proactieve statusupdates: Klanten worden proactief geabonneerd op statusupdates over de diensten en servers die ze gebruiken.
  4. Extra back-upservice: Voor onze CloudPress-gebruikers en klanten met het hoogste abonnement op WordPress-onderhoud introduceren we een extra back-upservice via de plugin JETbackup. Dit zorgt ervoor dat er altijd een externe back-up beschikbaar is. Andere klanten kunnen deze service tegen een kleine jaarlijkse vergoeding ook activeren.


Deze maatregelen zijn bedoeld om de betrouwbaarheid van onze diensten verder te versterken en ervoor te zorgen dat je altijd op de hoogte bent van wat er speelt, mocht er ooit nog een incident optreden.

Toegankelijke uitleg van technische termen.

  • Hypervisor-servers: Dit zijn krachtige computers die meerdere virtuele machines (zoals websites) tegelijkertijd kunnen draaien. Ze zorgen ervoor dat al jouw diensten soepel blijven werken.

  • Switch: Een apparaat dat computers en servers met elkaar verbindt binnen een netwerk, zodat gegevens snel en efficiënt kunnen worden uitgewisseld.

  • Redundantie: Dit betekent dat er meerdere kopieën of systemen zijn die elkaars werk kunnen overnemen als er iets misgaat. Bijvoorbeeld, als één server uitvalt, neemt een andere server het automatisch over.

  • Storage-platform: Dit is de plek waar alle data wordt opgeslagen, zoals bestanden, databases, en e-mails. Onze storage-platformen zijn zo ingericht dat jouw data veilig en altijd beschikbaar blijft, zelfs als er een probleem optreedt.

  • Back-up: Een extra kopie van je gegevens die op een andere locatie wordt bewaard. Als er iets misgaat, kun je altijd terugvallen op deze kopie om je gegevens te herstellen.

Met deze uitleg hopen we dat je een beter begrip hebt van de technische termen die we gebruiken en hoe deze bijdragen aan de betrouwbaarheid van onze diensten.

Onze oprechte excuses en dank voor je begrip.

We willen beginnen met onze oprechte excuses voor het ongemak dat de recente storingen hebben veroorzaakt. We begrijpen hoe frustrerend dit kan zijn, en nemen dit zeer serieus. Hoewel deze incidenten ongewenst waren, hebben ze ons ook de kans gegeven om onze processen en systemen verder te verbeteren. Hierdoor zijn we nu beter voorbereid op toekomstige uitdagingen en kunnen we jou nog beter van dienst zijn.

Bij NOMAXX Hosting streven we er altijd naar om je de meest betrouwbare en veilige hostingdiensten te bieden. Met de nieuwe maatregelen die we hebben genomen, versterken we onze inzet om jou de best mogelijke ervaring te bieden. Mocht je vragen of zorgen hebben, staan we altijd voor je klaar.

Dank je wel voor je vertrouwen in NOMAXX Hosting. Neem gerust contact met ons op als je nog vragen hebt. We staan altijd voor je klaar!