AWS herstel DynamoDB veroorzaakte nieuwe storingen
De recente, grootschalige storing in de Amazon Web Services (AWS) regio US-EAST-1 hield veel langer aan dan aanvankelijk gemeld. AWS heeft toegegeven dat de herstelpogingen na het initiële DynamoDB-debacle een kettingreactie van nieuwe problemen in andere cruciale clouddiensten veroorzaakten.
De oorspronkelijke storing, veroorzaakt door een DNS-fout die toegang tot de DynamoDB API blokkeerde, was op 20 oktober om 02:24 uur PDT opgelost. Wat volgde was echter nog eens twaalf uur ellende zo meldt The Register.
Meteen na het oplossen van het DynamoDB-probleem, kreeg een intern subsysteem van EC2 – de fundamentele 'rent-a-server' dienst – problemen met het lanceren van nieuwe instances. Dit werd gevolgd door een storing in de 'health checks' van de Network Load Balancer, wat leidde tot netwerkconnectiviteitsproblemen in meerdere diensten, waaronder Lambda en CloudWatch.
Om het herstel te bespoedigen, zag AWS zich genoodzaakt om bepaalde operaties, zoals het lanceren van EC2-instances, tijdelijk te vertragen (throttlen). Pas om 15:01 uur PDT keerde de dienstverlening volledig terug naar normaal.
AWS heeft een gedetailleerde analyse van het incident beloofd. Ondertussen verwerken diensten zoals AWS Config en Redshift nog urenlang achterstallige berichten.
Meer over Cloud
Over Witold Kepinski
