Kalite Güvencesi · Nov 2026

Sürüm Geri Alma Hazırlığı: İşi de Kurtarın

CTO için risk temelli sürüm onayı, veritabanı uyumluluğu, aşamalı dağıtım ve hatalı yayın sonrasında iş işlemlerini doğrulama rehberi.

Release rollback readiness, dağıtım panelinde geri alma düğmesinin bulunması değildir. Bir değişiklik işlemlere, veri bütünlüğüne, performansa veya yetkilere zarar verdiğinde hizmeti güvenli duruma geri getirme becerisinin sınanmış olmasıdır. Kod geri alınabilirken iş etkisi geri alınamayabilir: hatalı veri geçişi kayıtları değiştirebilir, yinelenen bildirim gönderebilir veya müşterilere taahhüt oluşturabilir. CTO bu nedenle sürüm onayını kanıta dayalı risk kararı olarak görmelidir. Hatanın tanımını, dağıtımı kimin durduracağını, hangi durumun geri yüklenebileceğini ve hangi etkilerin otomatik düzeltilemeyeceğini belirleyin. Güvensiz sürümün maliyeti yalnızca kesinti değil müşteri zararı ve mühendislik zamanıdır.

Kontrolleri seçmeden önce değişiklikleri sınıflandırın

Her sürüm aynı onay törenini gerektirmez. Genel sayfadaki metin değişikliği; ödeme akışı, kimlik politikası veya yıkıcı veritabanı geçişinden farklı risk taşır. Değişiklikleri veri etkisi, ayrıcalık etkisi, dış yan etkiler, geri alınabilirlik ve etki alanına göre sınıflandırın. Yüksek riskli değişikliklerde bağımsız inceleme, belgelenmiş geri alma planı ve dar kapsamlı ilk dağıtım gerekir. Düşük riskliler izleme ve sorumluluk korunarak daha hafif otomatik yoldan geçebilir. Riski yalnızca kod satırı sayısı veya ekip kıdemiyle ölçmeyin. Tek satırlık yapılandırma üretim veritabanını açabilir; kapalı özellik bayrağı arkasındaki büyük refaktör ise az etki yaratabilir.

Dağıtımdan önce geri almayı tasarlayın

İyi geri alma planı önceki uygulama paketini, yapılandırma anlık görüntüsünü, özellik bayrağı durumunu, veritabanı uyumluluğunu ve kurtarmayı başlatmaya yetkili kişiyi tanımlar. Dağıtılabilir paketleri ve değişmez sürüm kimliklerini saklayın. Olay sırasında eski sürümü değişken bağımlılıklardan yeniden derlemeye güvenmeyin. Eski uygulamanın yeni şemayı okuyabildiğini doğrulayın; uyumluluk yoksa kontrollü ileri düzeltme planlayın. Kesin komutları veya işlem hattı adımlarını, beklenen süreyi ve doğrulama kontrollerini yazın. Üretime benzeyen ortamda deneyin. Veritabanı, kuyruk, önbellek ve dış çağrılar değiştiğinde önceki commit'e dön demek yeterli değildir.

Riskli veri değişiklikleri için genişlet-ve-daralt yöntemini kullanın

Veritabanı geçişleri sürümün geri alınamamasının yaygın nedenidir. Sütun adı değiştirirken önce uyumlu yeni alan ekleyin, iki biçimi okuyabilen kodu dağıtın, veriyi kontrollü doldurun, yazma yönünü sonra değiştirin ve eski alanı ancak doğrulamanın ardından kaldırın. Aşamalar arasında kayıt sayısını, referans bütünlüğünü ve uygulama davranışını denetleyin. Uzun veri doldurma işlemlerini ve replikasyon gecikmesini hesaba katın. Kontrol noktaları, tekrar çalıştırılabilir betikler ve mutabakat bozulursa durdurma koşulu kullanın. Yedek tek başına yeterli kurtarma süresi sağlamaz; büyük veritabanını geri yüklemek uzun sürebilir ve sonradan yapılan geçerli işlemleri silebilir.

Aşamalı dağıtım etki yarıçapını sınırlar

Canary, blue-green dağıtım ve özellik bayrakları ancak mimariyle uyumluysa etki alanını sınırlar. Trafiğin yüzde beşini alan canary bile yüksek değerli ödeme işleyebilir veya herkesin kullandığı ortak veriye yazabilir. İlk grubu yalnızca yüzdeye değil riske göre seçin. Mümkünse sentetik işlemler veya iç hesaplarla başlayın, açık sağlık kontrollerinden sonra kapsamı genişletin. Yeni davranış için kapatma anahtarı tutun; arka plan işleri, olay tüketicileri ve dış çağrıları da durdurup durdurmadığını bilin. Özellik bayraklarının sahibi, bitiş tarihi ve değişiklik günlüğü olmalıdır. Aksi halde geçici güvenlik aracı kalıcı yapılandırma borcuna dönüşür.

Metrikleri görmeden önce durdurma koşullarını belirleyin

Ekipler çoğu zaman hata oranı yükseldikten sonra geri almayı tartışmaya başlar. Dağıtımdan önce kullanıcı zararını gösteren durdurma koşullarını belirleyin: ödeme başarısızlığı, yetki reddi, veri uyuşmazlığı, kuyruk yaşı, gecikme ve destek şikâyetleri. Canary grubunu geçerli başlangıç verisiyle karşılaştırın; gün içi trafik değişimini hesaba katın. Bazı kritik olaylarda tek vaka anında durdurma gerektirir, diğerlerinde yanlış alarmı azaltmak için sürekli eşik gerekir. Olay yöneticisini ve otomatik durdurmayı gerekçeyle aşabilecek kişiyi belirleyin. Ticari işlemler sessizce bozulurken yeşil dağıtım paneli yeterli değildir.

Yeterli olmayan varsayımsal bir geri alma

Varsayımsal bir abonelik hizmetinin yeni faturalama kuralı dağıttığını düşünün. Ekip hatayı bulur ve önceki uygulamayı dakikalar içinde geri yükler. Ancak yeni kural küçük bir müşteri grubuna yanlış faturalar göndermiştir. Kodun geri alınması yeni zararı durdurur, fakat faturaları iptal etmez veya muhasebe kayıtlarını düzeltmez. Bu gerçek müşteri vakası değildir. Tam hazırlık planı etkilenen işlemleri bulmayı, sonraki bildirimleri durdurmayı, faturaları mutabık kılmayı, yetkili sahiplerle iletişim kurmayı ve onaylı telafi kayıtlarını uygulamayı kapsar. Teknik geri alma süresiyle iş doğruluğunu yeniden kurma süresini ayrı ölçün.

Kanıta dayalı bir kurtarma tatbikatı yapın

Gerçekçi dağıtım paketi ve temsili veri yapılarıyla test ortamında kontrollü tatbikat planlayın. Uyumluluk kontrolünün başarısız olması, gecikmenin artması veya kasıtlı hatalı özellik ayarı gibi güvenli kusur ekleyin. Nöbetçi mühendis sorunu algılasın, durdurma koşulunu çalıştırsın, önceki sürümü geri getirsin ve kritik iş akışlarını doğrulasın. Zamanları, kararları, komutları, beklenmedik bağımlılıkları ve kalan veri etkilerini kaydedin. Tatbikatta üretim müşteri verisini kullanmayın veya gerçek dış ödeme başlatmayın. Amaç prosedürü tasarlayan kişinin değil gerçek nöbetçi ekibin uygulayabildiğini kanıtlamaktır. Altyapı ya da dağıtım aracı değişince yeniden deneyin.

90 günlük bir sürüm güvence programı oluşturun

İlk otuz günde en etkili on dağıtım yolunu sınıflandırın, sahiplerini belirleyin ve mevcut kurtarma adımlarını belgeleyin. Hatalı dağıtımı algılama ve geri alma başlangıç süresini ölçün. 31–60. günlerde değişmez paketler, önceden belirlenmiş durdurma eşikleri, aşamalı yayın ve veri değişiklikleri için uyumluluk kontrolleri ekleyin. 61–90. günlerde nöbetçi ekiple iki kurtarma tatbikatı yapın, iş yan etkilerini mutabık kılın ve istisnaları mühendislik, ürün ve güvenlikle inceleyin. Uygulama kritikliğini dikkate almadan evrensel geri alma süresi belirlemeyin. Algılama, teknik geri yükleme, iş mutabakatı ve başarısız değişiklik oranlarını ayrı raporlayın. Böylece yeni kontrol listesi değil karar sistemi kurulur.

Bir CTO'nun onaydan önce talep etmesi gerekenler

Yüksek riskli sürümü onaylamadan önce sınanmış kurtarma paketini, veritabanı uyumluluğu sonucunu, ilk kullanıcı grubunu, durdurma koşullarını, sorumlu operatörü ve iş mutabakatı planını isteyin. Bir unsur eksikse kalan riskin kabul edilip edilmediğini açıkça kararlaştırın; genel yeşil durumun arkasına saklamayın. İlgili uygulamalar için ölçülmüş kurtarma tatbikatlarına ve kapsam dışı kalite ölçülerine bakın. Google SRE sürüm mühendisliği ve DORA araştırmaları yararlı operasyonel bağlam sağlar. Bu ay tek iş yapacaksanız yüksek riskli geri alma tatbikatı yapıp geri döndürülemeyen etkileri belgeleyin.