deniz.in

Piyasalar

Hava durumu

Hava durumu yükleniyor

· kaynak Hacker News – Front Page (native)

AWS'un us-east-1 kesintisi gece boyunca 11 hizmeti aksattı, neredeyse hiç ses getirmedi

AWS, 15 Kasım'da us-east-1 bölgesinde 11 hizmeti aksatan bir olayı doğruladı; ancak seher vakti yaşanması ve mühendisleri etkilemesi olayı manşetlerden uzak tuttu ve bulut olay raporlamasındaki boşlukları gözler önüne serdi.

AWS'un us-east-1 kesintisi gece boyunca 11 hizmeti aksattı, neredeyse hiç ses getirmedi

us-east-1'de gece yaşanan bir olay

The Register'ın 21 Kasım'da yayımladığı bir köşe yazısına göre AWS, en eski ve en yoğun kullanılan bölgesi olan us-east-1'de 15 Kasım'da ciddi bir kesinti yaşadı ve olay neredeyse tamamen haberleşilmedi. AWS, olayın 11 hizmeti aksattığını doğruladı. İlk belirtiler Pasifik saatiyle sabah 03.05'te görüldü; AWS kayıt hataları, kimlik doğrulama sorunları ve bağlantı problemleri kaydetmeye başladı. Mühendisler beş dakika sonra devreye girdi. Ancak AWS durum sayfası, olaya ilişkin ilk bildirimi başlangıcından 93 dakika sonra yayımladı ve çözüm bildirimi sabah 06.53'te geldi.

The Register'ın aktardığına göre en çok etkilenen hizmet, mühendislerin AWS hesaplarına giriş yapmak için kullandığı araç olan IAM Identity Center oldu. Bu ayrıntı hikayenin tamamını şekillendirdi: Arıza, bozuk bir uygulamaya bakan son kullanıcıları değil, sistemleri kuran ve işleten insanları etkiledi.

Kesinti neden sessiz kaldı

The Register üç etken belirliyor. Birincisi, olay Pasifik saatiyle pazar günü şafak sökmeden, sektörün büyük bölümü uyurken başladı. İkincisi, etkilenen hizmetler tüketiciye değil şirket içine dönüktü; dolayısıyla kesinti izleyicilerinin yakalayabileceği bir kamu şikayeti dalgası yaşanmadı. Üçüncüsü, haber akışı zaten doygun durumdaydı: Aynı dönemde bir günden uzun süren bir Microsoft 365 kesintisi ve dört saat süren ülke çapında bir hava trafiği durdurması yaşandı.

Köşe yazısı ironik bir dönemeç de ekliyor. AWS sözcüsü Patrick Neighorn, Downdetector AWS'yi etkilenmiş olarak göstermeye başladığında aracı güvenilmez olmakla eleştirmişti. Accenture'a ait olan Downdetector büyük ölçüde tüketici şikayetlerinin hacmini ölçerek çalışıyor — başlangıçta Twitter analizi yoluyla — ve pazar günü sabah 03.00'te yaşanan bir mühendis oturum açma hatası bunlardan hiç üretmiyor. Köşe yazarına göre etkili olarak, AWS'nin şikayet ettiği araç, bu olayın bu kadar az ilgi görmesinin nedenlerinden biri.

Durum sayfası sorunu

İlk durum güncellemesinden önceki 93 dakikalık boşluk, köşe yazısının ana argümanının merkezinde yer alıyor. AWS'nin resmi durum sayfasını olayları daha erken görünür kılmak için yeniden yazan üçüncü taraf bir aracı sürdüren The Register yazarı, sayfanın müşterilerin fiilen yaşadıklarının gerisinde kaldığını uzun zamandır iddia ediyor. Bir arızanın kendi kodlarından mı yoksa sağlayıcı tarafındaki bir olaydan mı kaynaklandığını belirlemeye çalışan mühendisler için bu gecikme kozmetik değil, operasyonel önemde.

Yazı olayı, sınırlı takip haberi alan AWS olaylarının daha geniş bir örüntüsüne de yerleştiriyor. AWS, İran çatışmasından etkilenen iki bölgede kalıcı veri kaybı yaşadığını Eylül'de kabul etti; köşe yazarına göre bu haber hızla gözden kayboldu. The Register'a göre AWS şu anda 34 genel kullanıma açık ticari bölge işletiyor ve bu bölgelerin ikisi hâlâ çevrimdışı.

Merkezileşme neyin fark edildiğini değiştiriyor

The Register'ın aktardığı Downdetector'un kendi verileri, bildirilen kesintilerin kabaca 2022'den bu yana azaldığını gösteriyor. Köşe yazarının okuması şöyle: Bilişim, aynı sistemleri kendi bünyelerinde işleten şirketlerden çok daha iyi büyük ölçekli sorunları çözen az sayıda büyük sağlayıcıda merkezileşti. Sonuç olarak görünürlük artık hangi katmanın ne zaman bozulduğuna bağlı. Dağınık arızalar izole kötü günler olarak okunuyor; eş zamanlı olanlar küresel haber oluyor. Köşe yazısının belirttiğine göre Microsoft, Temmuz'dan beri bildirildiğine göre haberdar olduğu bir hatayı sonuçta açıklamak zorunda kalırken, AWS kendi durum sayfasının bir buçuk saat geç işaretlediği bir olayla ilgili eşdeğer bir baskıyla karşılaşmadı.

Neden önemli

Bu olay AWS güvenilirliğinden çok olay raporlamasındaki asimetriyle ilgili. Kesinti haberleri şiddetten çok tüketici tarafından görülen belirtiler tarafından şekilleniyor; bu da son kullanıcılar yerine operatörleri vuran altyapı arızalarının büyük ölçüde denetimsiz geçebilmesi anlamına geliyor. us-east-1'e bağımlı ekipler için yavaş bir durum sayfası, her dakikanın sayıldığı anlarda hata ayıklama süresini uzatıyor; çünkü asıl neden sağlayıcıyken ekipler kendi sistemlerini araştırmak zorunda kalıyor. İş yükleri daha az platformda yoğunlaştıkça, sağlayıcıların bildikleriyle müşterilere söylenenler arasındaki fark yapısal bir risme dönüşüyor. The Register'ın AWS'ye kapanış önerisi, Downdetector'un rakamlarından daha az, bu tür olayların kaybolmasına izin veren raporlama gecikmelerinden daha fazla endişelenmesi yönünde.

  • #aws
  • #cloud
  • #outage
  • #us-east-1
  • #status-page

İlgili yazılar