Wereldwijde storing bij Amazon CloudFront treft VPC-verbindingen
Een technische storing bij Amazon Web Services (AWS) heeft op donderdag 16 juli geleid tot verbindingsproblemen voor een deel van de CloudFront-gebruikers. Gedurende ruim drie en een half uur kregen klanten die gebruikmaken van specifieke VPC-koppelingen (Virtual Private Cloud) te maken met een sterke toename van zogeheten '5xx'-foutmeldingen.
De problemen begonnen rond 09:45 uur Nederlandse tijd (12:45 AM PDT). AWS meldde dat de storing uitsluitend invloed had op CloudFront-klanten die hun dataverkeer routeren via VPC Origins. Systemen die gebruikmaken van andere verbindingstypes bleven gedurende het incident normaal functioneren.
Oorzaak in netwerkconfiguratie
Na een intern onderzoek stelden technici van AWS vast dat de storing werd veroorzaakt door een capaciteitslimiet binnen de systemen die de verbindingen met private VPC-omgevingen beheren.
Toen deze limiet werd bereikt, slaagde de software die verantwoordelijk is voor het distribueren van de routeringsconfiguraties naar de netwerkprocessoren er niet meer in om updates correct te laden. Dit ontregelde het dataverkeer tussen de edge-locaties van CloudFront en de private netwerkomgevingen van klanten.
Herstel en workaround
Gedurende de storing adviseerde AWS getroffen klanten om tijdelijk over te stappen op een ander type netwerkverbinding om de foutmeldingen te omzeilen. Na het nemen van verschillende herstelmaatregelen wist het cloudplatform de systemen rond 13:18 uur Nederlandse tijd (04:18 AM PDT) weer volledig stabiel te krijgen.
AWS heeft laten weten dat het incident inmiddels volledig is opgelost en dat de dienstverlening weer normaal functioneert. Getroffen klanten kunnen hun tijdelijke netwerkaanpassingen veilig terugdraaien.
Meer over Cloud
Over Witold Kepinski
