Depla ve oyun güncellemeleri kesintisiz nasıl çalışır

Neden sıfır kesinti casino bültenleri

IGaming'deki herhangi bir "micropause", bahisleri, oturumları ve güveni kaybeder. Güncellemeler oyuncu tarafından fark edilmeden gerçekleşmelidir: bahisler kabul edilmeye devam eder, akış kesilmez, cüzdan ve defter tutarlı kalır ve metrikler atlamaz. Anahtar, sürüm disiplini, sözleşme uyumluluğu ve adım adım gözlemlenebilir hesaplamalardır.

Referans ilkeleri

1. İleri/geri uyumluluk. Eski olayları/alanları anlamak için yeni sürümler gereklidir ve eski istemcilerin yenilerini güvenli bir şekilde görmezden gelmeleri gerekir.

2. Değişmez varlıklar. Statik ve oyun kaynakları karma isimlerle verilir; Dosyaların "üzerine yazma" yok.

3. Yazma/okuma yolunu böl. Nakit işlemleri (hold/settle) izole edilir ve atomik, UI/varlıklar bağımsız olarak değişir.

4. Bir sözleşme olarak gözlemlenebilir. İzleme/metrikler olmadan serbest bırakma - yasaklama.

5. Geri alma, serbest bırakma ile aynı normdur. Hazır görüntüler, iki yönlü göçler, manuel şamanizm olmadan geri alma düğmesi.

Uygulamada sıfır kesinti mimarisi

1) Versiyonlar ve sözleşmeler

API/etkinlikler için SemVer: 'MAJOR. MINÖR. PATCH ', her mesajda' eventVer/contractVer 'alanı.

Expand> Migrate> Contract for database schemes: first add fields/indexes (expander), then background migration (migrate), and only after closing off the contract.

Kritik mantığı değiştirirken çift yazma/çift okuma (örneğin, bir bonus hesaplama): bir süre için eski ve yeni tablolara yazıyoruz, karşılaştırıyoruz.

2) Varlıklar ve CDN'ler

Paketler/spritler/metinler: 'uygulama. a1b2c3. Js ',' ödeme tablosu. 98f0. png ', başlıklar:


Önbellek Kontrolü: genel, maksimum yaş = 31536000, değişmez

Sunucu/CDN üzerinde varlık manifestosu. Bağlantıyı yeni manifestoya geçiriyoruz - oyuncular anında yeni bir kullanıcı arayüzü alıyor, eski sayfalar aynı dosyalarla (kırık bağlantılar olmadan) yaşamaya devam ediyor.

Sık sık değişen JSON (kataloglar/afişler) + yumuşak kayma için 'bayat-while-revalidate' için etiket temizleme.

3) Trafik stratejileri

Kritik bileşenler için Mavi-Yeşil (cüzdan/defter/köprü): iki özdeş ortamı koruyun, saniyeler içinde giriş/sanal hizmeti değiştirin.

API/oyun ağ geçitleri için kanarya: Trafiğin %1-5 SLO/Fin Delta analizi %100'e genişletin.

UI ve mekanik için özellik bayrakları: kod yayınlamadan bir segment, bölge veya oyun için içerir.

4) Canlı oyunlar ve RNG

Canlı (WebRTC/LL-HLS):

Oynatıcıyı/kaplamaları video akışından ayrı olarak değiştiririz (farklı etki alanları/yapılandırmalar).
Sunucu zamanı ve yeni bir sinyale yumuşak geçiş.

RNG/İstemci:

Oyunun yeni yapısı kaynağın yeni bir versiyonu olarak verilir. Tura zaten başlamış olan oyuncular, eski müşteri/kurallar üzerinde sonlandırırlar.
В yuvarlak. Yerleşmiş 'fix' calcVer '- hesaplama motorunun bir versiyonu, böylece tartışmalı turlar "olduğu gibi" oynanır.

5) Cüzdan ve defter - nasıl para kırılmaz

Parça başına bir yazar. Yazıcı anahtarlama ayrı bir prosedürdür (kilitlerle) ve yalnızca AZ/bölge içinde.

Tüm yollarda idempotence: 'bet. place', 'round. Settle ',' ödeme. Talep, kasiyer. webhook '- с' idempotencyKey '.

PITR ve gölge kontrolleri: Kanarya hesaplaması sırasında, kablolamayı "gölgede" çoğaltıyoruz, promosyondan önce üniteleri (GGR/NGR) kontrol ediyoruz.

Kesinti olmadan adım adım sürüm (referans senaryosu)

1. Hazırlık:

Yayın sözleşmesi: 'PATCH/MINOR/MAJOR', uyumluluk matrisi.
'Genişlet' geçişleri önceden uygulanır, indeks yapıları çevrimiçi olarak uygulanır.
Varlıklar CDN'e yüklendi, manifesto hazır.

2. Kanarya Başlangıç (API/Oyun Ağ Geçitleri):

Trafiğin %1-5'i. P95/99'u izliyorum. Place ',' settle ',' error _ rate ',' VOID 'büyüme, ödeme dengesizliği.
Finansalları kontrol grubu (delta

3. Uzatma/Anahtar:

Yüzdeyi 25/50/100'e yükseltin veya para çekirdeğinde Mavi-Yeşil'i değiştirin.
Özellikleri bayraklarla açıyoruz (yerel/oyun/bölge).

4. 'göçmen' göçü:

Arka plan jabları veri/ilerleme taşır, çift yazma etkinleştirilir.
Telemetri metrik eşleşmeyi doğrular.

5. Optimizasyon ve 'sözleşme':

Legasi okumayı devre dışı bırakın, bir sonraki MINOR/MAJOR'daki "gölgeleri" kaldırın.
Düzenlerin/olayların dizinlerini güncelleyin, kullanımdan kaldırmayı kapatın.

6. Dokümantasyon ve retro:

Olay olmadan bile post-mortem/retro: SLO'da ne geliştirilecek, uyarılar, kontrol listeleri.

Serbest bırakıldığında gözlemlenebilirlik ve SLO

SLI/SLO:

'bet. Konum p95 '(hedef ≤ 150-250 ms),' error _ rate '(<0. %3), 'yuvarlak. Settle p95 '(≤2 с)', ödeme. P95 '(≤800 ms) gönderin.
Canlı QoS: 'webrtc _ rtt _ ms', 'drop _ frames', 'aborted _ rounds'.
Sürüm etiketleri: 'BuildId', 'semver', 'contractVer', 'calcVer' günlüklerde ve izde.
Fin deltaları: Eski/yeni dal segmentlerine göre GGR/NGR/tutma karşılaştırması.

Ağrısız geri dönüşler

Mavi-Yeşil: anlık rota'mavi'ye döner.

Kanarya: trafiği %0'a düşürün, bir bayrakla özellikleri devre dışı bırakın.

Varlıklar: Eski manifesto değişmez kalır, eski sayfalardaki oyuncular bozulmaz.

Veri: çift yazma varsa, geri dönerken'eski "kaynağı okuruz; Onaylanmadan önce yıkıcı göçler yoktu.

Organizasyon ve Süreçler

SRE koruması ile pencereleri değiştirin: Zirveler/spor etkinlikleri için serbest bırakma yuvalarına dokunulmaz.

Çalışma kitapları: giriş anahtarları için kontrol listeleri, veritabanı rolleri, özellik bayrağı, iletişim zincirleri.

Karanlık başlatma: kullanıcı arayüzünde görünürlük hariç her şeyi açın, "gizli" yükü çalıştırın.

Sık yapılan hatalar (anti-patterns)

Sürüm oluşturmadan varlıkların üzerine yazma - kırık istemciler ve pembe kareler.

Olay değişikliklerini/API'leri "sessizce" kırmak - sağlayıcı ve gösterge tablosu entegrasyonlarının dökümü.

Şema + mantık çift yazma olmadan tek adımda geçişler - finansal tutarsızlıklar.

Idempotency eksikliği - retrays çift borçlar.

Kanaryalar ve metrikler olmadan aynı anda %100 tek bir anahtar.

UI sürümünü ve hesaplanan çekirdeği tek bir dağıtımda karıştırma.

Geri alma planı veya geri alma işlemi "manuel" SQL gerektirmez.

Sıfır kesinti sürüm kontrol listesi

Sözleşmeler ve veriler

SemVer + 'contractVer/eventVer/calcVer' yazılır ve belgelenir.
Önceden uygulanan göçleri 'genişletmek'; arka planda 'göçmen'; Bir sonraki döngüde 'sözleşme'.
Çift yazma/Finlojinin değiştiği yerde çift okuma.

Altyapı

CDN: değişmez varlıklar, manifest, tag-purge, 'bayat-while-revalidate'.
Paranın çekirdeği için Mavi-Yeşil; API/oyun ağ geçitleri için kanarya.
UI/mekanik için özellik bayrakları; Bayraklar dağıtılmadan yönetilir.

Gözlemlenebilirlik

'buildId/semver/calcVer'ile izler; Gösterge panoları SLO ve fin delta.
Büyümeye uyarılar 'VOID', 'error _ rate', live-QoS'un bozulması.

Geri alma ve güvenlik

rollback (ingress/routing) düğmesi, eski manifest kullanılabilir.
Defteri kontrol etmek için PITR ve gölge ilanları.
Geri alma testi sahnede ve küçük üretim segmentinde gerçekleştirilmiştir.

Süreçler

Runbooks anahtarları; Tutarlı değişim pencereleri.
Karanlık fırlatma/kanarya; Serbest bırakıldıktan sonra retro.

IGaming'de sıfır kesinti süresi bir sistem uygulamasıdır: sürümler ve sözleşmeler, değişmez varlıklar ve CDN, mavi-yeşil/kanarya, boşta olmayan geçişler, idempotent para ve sıkı gözlemlenebilirlik. Bu kontrol listesinin ardından, oyunları ve platformu güncellersiniz, böylece oyuncu hiçbir şey fark etmez - her şeyin daha hızlı ve daha kararlı hale gelmesi dışında.