Dans la soirée du vendredi 29 juin, Amazon Web Services (AWS) a connu une panne majeure sur son site de Virginie du Nord en raison d'une perte de puissance . Cette panne, la deuxième en juin, a affecté de nombreux clients AWS qui utilisent PagerDuty. PagerDuty étant également client AWS, nous sommes heureux de vous informer que nous avons pu « résister à la tempête » et n'avons subi aucun temps d'arrêt.

Alors que nous nous efforçons de maintenir notre niveau de support client et de transparence à son plus haut niveau, nous aimerions récapituler brièvement les événements de la soirée, ce que nous avons fait pour résoudre et ce que nous continuons de faire pour garantir que vos services d'alerte via PagerDuty sont ininterrompus. au mieux de nos capacités.

Ce que PagerDuty a vu

À 20 h 06 (heure du Pacifique), le vendredi 29 juin, notre système a remarqué un pic inhabituel d'alertes sur la plateforme PagerDuty . Selon la propre analyse d'Amazon, « Environ 7 % des instances EC2 dans la région US-EAST-1 se trouvaient dans la zone de disponibilité concernée et étaient affectées par la panne de courant. »

Les pics d’alerte notables qui nous ont fait prendre conscience de l’événement AWS sont ci-dessous :

Augmentation d'environ 20 fois du trafic en raison d'une panne d'AWS. (Le deuxième pic coïncide avec l'ajout d'une seconde intercalaire dans l'UTC et n'est probablement pas lié).

Comme mentionné dans notre Article de blog du 18 juin , après la première panne d'AWS en juin 2012, nous avons fait et faisons ce qui suit pour garantir la disponibilité de PagerDuty pour nos clients :

Centres de données migrés d'AWS US-East vers US-West :
Cette migration de centre de données a été effectuée le 19 juin 2012. L'objectif de cette migration était de dissocier nos défaillances de celles de nos clients. En d'autres termes, ce n'est évidemment pas une bonne idée pour nous de fonctionner sur la même infrastructure qu'un pourcentage important (plus de 20 %) de nos clients. Nous avons donc quitté la zone Est des États-Unis.

Chez PagerDuty, nous prenons toutes les questions liées à la disponibilité de nos services très sérieusement. Si vous avez des questions ou des préoccupations, n'hésitez pas à nous contacter à support@pagerduty.com .