AWS kan sommige data uit getroffen datacenters niet meer herstellen

AWS kan sommige data uit getroffen datacenters niet meer herstellen

Amazon Web Services (AWS) heeft de toegang tot een deel van de gegevens in zijn door oorlogsgeweld getroffen infrastructuur in het Midden-Oosten niet kunnen herstellen. Het gaat om de AWS-regio in Bahrein en één Availability Zone in de Verenigde Arabische Emiraten.

De problemen ontstonden in maart, toen AWS-datacenters in beide landen werden getroffen door droneaanvallen tijdens de oorlog met Iran. Daarbij ontstond fysieke schade aan gebouwen, stroomvoorzieningen en andere infrastructuur. In sommige gevallen zorgde het blussen van branden bovendien voor waterschade. AWS waarschuwde destijds al dat volledig herstel lang kon duren.

Ruim een half jaar later blijkt een deel van de infrastructuur niet meer te herstellen. In Bahrein trof de schade meerdere Availability Zones. Volgens AWS ging de omvang daarvan verder dan waarop zijn regionale diensten en voorzieningen die over meerdere zones zijn verdeeld, zijn ontworpen. Het bedrijf heeft na onderzoek vastgesteld dat het geen toegang meer kan herstellen tot resources en gegevens die uitsluitend in de regio Bahrein waren opgeslagen.

AWS had klanten na de eerste schade in maart al geadviseerd workloads naar andere regio’s te verplaatsen. Veel klanten deden dat voordat een tweede verstoring in april de regio Bahrein volledig onbeschikbaar maakte. Voor getroffen klanten blijft AWS ondersteuning bieden bij een verhuizing naar andere regio’s.

Andere situatie in VAE

In de Verenigde Arabische Emiraten is de situatie minder verstrekkend. AWS beschikt daar over drie Availability Zones binnen de regio me-central-1. Het bedrijf heeft vastgesteld dat resources en gegevens die uitsluitend in mec1-az2 werden gehost niet meer toegankelijk kunnen worden gemaakt. Voor regionale resources en gegevens in de twee andere getroffen zones, mec1-az1 en mec1-az3, lopen de herstelwerkzaamheden nog.

Dat onderscheid raakt enigszins ondergesneeuwd in berichtgeving van Bloomberg, dat schrijft dat Amazon geen toegang meer kan krijgen tot gegevens die uitsluitend in datacenters in Bahrein en delen van zijn netwerk in de VAE waren opgeslagen. Uit de eigen statusmeldingen van AWS blijkt specifieker dat in Bahrein de volledige regio is getroffen, terwijl in de VAE het niet meer kunnen herstellen van data vooralsnog beperkt is tot één Availability Zone.

De meeste klanten in de VAE hebben hun activiteiten inmiddels elders hervat. Ze konden daarvoor back-ups terugzetten of gegevens kopiëren die ondanks de schade toegankelijk waren gebleven.

Grenzen van redundantie

De gebeurtenissen laten tegelijkertijd zien waar de grenzen van het Availability Zone-model liggen. AWS verdeelt zijn infrastructuur binnen een regio over afzonderlijke zones, zodat uitval van één locatie niet automatisch de hele regio raakt. In Bahrein raakten echter meerdere zones beschadigd. AWS stelt dat de schade daar groter was dan waarop zijn regionale en multi-AZ-diensten zijn ontworpen.

Daarmee verschilt de oorzaak wezenlijk van een reguliere technische storing. De infrastructuur werd op meerdere locaties fysiek beschadigd door militair geweld. AWS werkt aan vervanging van getroffen apparatuur en infrastructuur en verwacht de komende maanden meer duidelijkheid te geven over het verdere herstel in de VAE. Voor Bahrein staat een nieuwe update begin volgend jaar gepland.