· kaynak dev.to (home feed)
Actions ve Copilot'i durduran GitHub kesintisi, break-glass deploy ihtiyacını yeniden gündeme getiriyor
11 Kasım 2026'daki yaklaşık 33 dakikalık GitHub olayı Actions, Pages ve Copilot'i etkiledi ve dağıtımları kısa süreliğine durdurdu. Bir dev.to yazısı, CI pipeline'larının test edilmiş manuel yedeklere ihtiyaç duyan birer production bağımlılığı olduğunu savunuyor.

Keskin bir yanı olan kısa bir kesinti
Platform mühendisi Nazmul Ahasan'ın dev.to'daki yazısına göre GitHub, 11 Kasım 2026'da saat 20:48 UTC'de Actions, Pages ve Copilot dahil birden fazla GitHub ürününü etkilediği belirtilen bir durum sayfası olayı açtı. Actions, Pages ve Copilot büyük kesinti olarak işaretlendi; webhook'lar ise bozulmuş (degraded) olarak gösterildi. GitHub, sorunun 21:07 UTC'de hafifletildiğini ve kuyruğa alınan Actions işlerinin birikimi boşaldıktan sonra 21:21 UTC'de tamamen çözüldüğünü bildirdi.
Bu yaklaşık 33 dakika ediyor — ancak production'a giden tek yolu bir GitHub Actions workflow'undan geçen herhangi bir ekip için hotfix'ler, rollback'ler ve yapılandırma değişiklikleri hizmet geri gelene kadar tamamen imkânsızdı.
Kritik yoldaki tek bir barındırılan servis
Ahasan'ın temel argümanı şu: ekipler yedekli veritabanlarına ve load balancer'lara ağır yatırımlar yapıyor, sonra her production değişikliğini tek bir barındırılan servisten, tek bir webhook sisteminden ve yine aynı servisin verdiği kimlik bilgilerinden geçiriyor. Tipik bir barındırılan pipeline zincirindeki halkaları şöyle sıralıyor:
- source-control sağlayıcısının erişilebilir olması
- webhook'ların tetikleyiciyi ulaştırması
- barındırılan runner'ların işleri kabul etmesi
- buluta erişmek için kullanılan, CI tarafından verilen kimlik (örneğin OIDC token'ları)
- iş ortasında registry'lerden çekilen artifact'lar ve container image'ları
Bunlardan herhangi birinin arızalanması dağıtımları durdurur. Çoğu gün basitçe bekleyebilirsiniz; tehlikeli olan gün, aktif bir kesintinin, geri alınması gereken kötü bir sürümün ya da süresi dolmak üzere olan bir sertifikanın olduğu gündür.
Bir break-glass deploy'un anatomisi
Ahasan, bu yedek yolu, normal pipeline kullanılamadığında bilinen iyi bir artifact'ı production'a taşımanın belgelenmiş, test edilmiş ve denetlenebilir bir yolu olarak tanımlıyor — bir arka kapı değil, her kullanımının sonradan gözden geçirildiği, bilinçli olarak daha yavaş ve daha kontrollü bir yol. Dört bileşen çağrısında bulunuyor.
Kendi kontrolünüzdeki bir runner: aynı deploy adımını yürütebilecek bir self-hosted runner ya da ikincil bir CI sistemi. Uyarısı önemli — GitHub'a kayıtlı self-hosted runner'lar hâlâ işin GitHub tarafından dispatch edilmesine bağlıdır; yani bunlar barındırılan runner kapasitesi sorunlarını çözer ama tam bir Actions kesintisini çözmez. Gerçek bağımsızlık, sağlamlaştırılmış bir bastion'dan ya da ilkinden bağımsız ikinci bir CI sisteminden başlatılabilen bir deploy gerektirir.
Halihazırda var olan artifact'lar: yedek yol, daha önce derlenmiş ve taranmış bir şeyi gönderir, bir laptop'ta derlenen bir şeyi değil. Release artifact'ları sahip olduğunuz bir depoda yaşar; dağıtılan image'lar kendi registry'nize mirror'lanır, böylece bir deploy asla bir public registry'den ya da CI sağlayıcısının cache'inden çekim yapmaz.
CI kesintisinden sağ kurtulan kimlik bilgileri: Actions ile bir bulut hesabı arasındaki OIDC federasyonu, uzun ömürlü anahtarları ortadan kaldırdığı için iyi bir varsayılan — ama yalnızca Actions token üretirken çalışır. Ahasan, yalnızca deploy yapmaya izin veren ayrı ve dar kapsamlı bir break-glass rolü öneriyor: phishing'e dayanıklı MFA ve ikinci bir kişinin onayı gerektiren, kısa oturumlu ve her üstlenimde uyarı tetikleyen bir rol.
İnsanların gerçekten yürüttüğü bir runbook: test edilmemiş bir runbook, diye yazıyor, pekala bir tahminden fazlası değildir.
Ayrıca örnek bir prosedür de çiziyor: bir olay açın ve yedek yolu kimin onayladığını kaydedin; MFA ile ve 900 saniyelik bir oturumla break-glass rolünü üstlenin; deployment'ı, tag yerine digest ile sabitlenmiş, daha önce taranmış bir image'a yönlendirin; yayını doğrulayın ve olay kaydında neyin değiştiğini log'layın. Digest ile sabitleme, baskı altında hangi "latest" sürümünün gönderildiğine dair her türlü belirsizliği ortadan kaldırır.
Tatbikat yapın, sonra gözden geçirin
Yazıyla birlikte verilen checklist operasyonel hijyen ekliyor. Manuel runbook'u, adı yazılı sahip kişilerle ve bir onay kuralıyla birlikte, source-control sağlayıcınızdan bağımsız bir yerde saklayın. Cache'lenen artifact'ları ve mirror'lanan image'ları digest ile referanslandırın. Planlı tatbikatlar yürütün — örneğin üç ayda bir, önce staging'de sonra production'da bir no-op değişiklikle — süreleri ölçün, bozan neyi varsa düzeltin ve düzeltmeleri runbook'a geri işleyin. Son olarak, bu yolun her gerçek kullanımını gözden geçirin ve politika gerektiriyorsa sonrasında kimlik bilgilerini rotate edin.
Neden önemli
Bu belirli olay bir saatin çok altında bitti ve GitHub kuyruktaki işleri sonrasında temizledi. Bir sonraki daha uzun sürebilir ya da tamamen farklı bir sağlayıcıda gerçekleşebilir. Daha geniş ders bir bağımlılık analizi dersi: ekipler barındırılan CI'a ve OIDC tabanlı kimliğe yakınsadıkça, delivery pipeline'ı, production'ın kendisi sağlıklı olsa bile değişiklik için tek bir arıza noktasına dönüşüyor. Normalde veritabanlarına ayrılan failover düşünüsünü — yedeklilik, bağımsız kimlik bilgileri, prova edilmiş kurtarma — buraya uygulamak, bir CI/CD kesintisini gönderimi engelleyen bir şeyden yönetilebilir bir zahmete dönüştürüyor.
- #github-actions
- #ci-cd
- #devops
- #incident-response
- #reliability