Torrent Gear

Docker и Kubernetes в iGaming: стратегии деплоя

1) Контекст iGaming: требования к платформе

Реал-тайм (лайв-игры, ставки, турнирные события) → строгие p95 по API/WS.

Пики трафика (стримы/промо) → быстрый автоскейл без «холодного старта».

Деньги и комплаенс → изолированность контуров, трассируемость релизов, контроль доступа и аудита.

Мульти-юрисдикции/бренды → тены (namespaces/projects), политики сетевой и ресурсной изоляции.

Ключевые SLO: логин ≥ 99.9%, депозит ≥ 99.85%, p95 API ≤ 250–400 мс, p95 WS RTT ≤ 120 мс.

2) Базовая архитектура на Kubernetes

Слои: Ingress/Edge → API/гейтвеи → сервисы (кошелёк, профиль, промо, антифрод) → очереди/стримы → хранилища.

Изоляция: `namespace` на brand/market или «ячейка» (cell) по региону; отдельные NodePools (public API / batch / ws-реалтайм).

Сетевые политики: `NetworkPolicy` по принципу «deny by default», отдельные egress-политики к PSP/KYC/провайдерам игр.

Хранилища: `StorageClass` с репликацией в пределах зоны/региона, операторы для БД/кэшей (Postgres/MySQL, Redis, Kafka).

3) Контейнерные образы: качество и безопасность

Multi-arch (amd64/arm64), distroless или slim-базы, только необходимые бинарники.

SBOM и сканирование уязвимостей, подпись образов (Cosign), политика приёма (`ImagePolicyWebhook`).

Immutable-tagging: релизы по `sha256`; «latest» запрещён.

Runtime-профили: `readOnlyRootFilesystem`, `runAsNonRoot`, `seccomp/AppArmor`, минимальные Capabilities.

4) Стратегии выпуска: когда и что выбирать

RollingUpdate (по умолчанию)

Без простоя; для большинства API.

Контроль через readiness/liveness/startup probes, maxUnavailable/maxSurge.

Blue-Green

Параллельные стеки Blue и Green; переключение трафика на уровне Ingress/Service.

Хорошо для крупных изменений схем/конфигов; быстрое rollback.

Canary

Постепенное включение процента трафика (5→10→25→50→100).

Тригерим SLO-гейты: p95, error-rate, аномалии в депозитах/ставках.

Варианты: Service Mesh (Istio/Linkerd), Ingress-контроллер с канареечными аннотациями.

A/B и Shadow

Shadow: зеркалим часть трафика на новый релиз без ответа пользователю (чистая телеметрия).

A/B: функциональные эксперименты с флагами (feature-flags) и сегментацией игроков/рынков.

5) GitOps и управление конфигурацией

GitOps (Argo CD/Flux): кластеры читают желаемое состояние из Git; все изменения через PR и ревью.

Шаблоны: Helm/Kustomize, единая библиотека чартов.

Секреты: внешние менеджеры (Vault/Cloud SM), `ExternalSecrets`/`Secrets Store CSI`; KMS-ключи и ротация.

Пайплайн (упрощённо):

1. CI собирает подписанный образ → пуш в регистри.

2. PR меняет версию образа/конфиг → GitOps применяет.

3. Канареечный rollout с SLO-гейтами → автоматический промоут или авто-rollback.

6) Автоскейлинг под пики и WS-нагрузку

HPA по метрикам приложения (RPS, p95 latency, queue lag), а не только CPU/RAM.

KEDA для событийного скейла (Kafka, RabbitMQ, Redis, HTTP-queue).

VPA для ежедневной правки запросов/лимитов.

Cluster Autoscaler + warm-пулы нод (pre-provision) на время промо/турниров.

Специфика WebSocket:

отдельные NodePools (больше сетевых дескрипторов), `PodDisruptionBudget` для мягкого обновления, sticky-routing (Session Affinity) через Ingress/Mesh.

7) Stateful-контуры: кошелёк, БД, очереди

Операторы (Postgres/MySQL, Redis Sentinel/Cluster, Kafka Operator): декларативная репликация, `PITR`, автоматические бэкапы.

Политика RPO/RTO: синхронная репликация в пределах зоны, асинхронная — в DR-регионы.

Idempotency/outbox для депозитов/выплат, inbox-паттерн для вебхуков PSP и провайдеров игр.

StorageClass с быстрым IOPS; для кошелька — отдельный класс и узлы с локальными SSD (и репликацией).

8) Сетевой слой и гейтвеи

Ingress (Nginx/Envoy/HAProxy/ALB) с mTLS к бэкендам, HTTP/2/3, HSTS, rate-limits.

Service Mesh: канареечные маршруты, ретраи/тайм-ауты, circuit-breakers, TLS внутри кластера по умолчанию.

Egress-шлюзы: белые списки к PSP/KYC/провайдерам, контроль DNS и IP.

9) Observability и SLO-гейты релизов

OpenTelemetry: трассировки через фронт→API→платёж/игровой провайдер; 100% ошибок и «медленных» спанов.

RED/USE-метрики + бизнес-SLI (успешность депозита/ставки/вывода).

Логи JSON со `trace_id`, WORM для аудита.

Release-gates: промоут только если SLO зелёные на тестовой доле.

10) Безопасность: от supply chain до рантайма

Policy as Code: OPA/Gatekeeper/Kyverno (запрет privileged, требование `runAsNonRoot`, лимитов, pull-проверок подписи).

Секреты и ключи: только из Secret Manager; `envFrom` минимизировать, sidecar-инъекция секретов.

Webhooks/вебхуки провайдеров: HMAC-подписи, idempotency, вход через egress-шлюз.

Compliance: аудит релизов, артефактов, доступов (RBAC/MFA), гео-изолированное хранение артефактов KYC/логов.

11) Мульти-регион, failover и DR

Актив-стэндбай по регионам (минимум для кошелька/логина/платежей).

Трафик-роутинг: GSLB/Anycast; health-чеки по SLI (логин/депозит/ставка).

Катастрофическое переключение: кнопка DR-cutover (freeze writes → promote DB → прогрев кэшей → поэтапный рулон трафика).

Учения: ежеквартальные GameDay с «падением» PSP, зоны, провайдера игр.

12) Управление конфигурацией и фичами

Feature-flags (конфиги в ConfigMap/External Config) — отключение тяжёлых функций при аварии.

Versioned конфиги (хеши, checksum-аннотации на Pod), canary конфиг-роллаута.

Runtime overrides на уровне Mesh/Ingress (тайм-ауты, retry-политики) без ребилда образов.

13) Экономика и производительность

NodePools по назначениям: RPS-API, WS-реалтайм, batch/ETL.

Spot/Preemptible для batch/ETL с `PodPriority` и `PodDisruptionBudget`.

Пакетная компиляция и прогрев (JIT/кэш шаблонов) для снижения cold-start.

Ресурсные бюджеты: requests/limits, VPA рекомендации, лимиты соединений к БД/PSP, connection pooling.

14) Шаблоны манифестов (фрагменты)

Deployment с канареем через аннотации Ingress:

yaml apiVersion: apps/v1 kind: Deployment metadata:
name: payments-api spec:
replicas: 6 strategy:
type: RollingUpdate rollingUpdate: {maxSurge: 2, maxUnavailable: 1}
template:
metadata:
labels: {app: payments-api, version: v2}
spec:
securityContext: {runAsNonRoot: true}
containers:
- name: app image: registry/payments@sha256:...
ports: [{containerPort: 8080}]
resources:
requests: {cpu: "300m", memory: "512Mi"}
limits:  {cpu: "1",  memory: "1Gi"}
readinessProbe:
httpGet: {path: /healthz, port: 8080}
periodSeconds: 5

HPA по кастомной метрике (RPS/latency через Prometheus Adapter):

yaml apiVersion: autoscaling/v2 kind: HorizontalPodAutoscaler metadata: {name: payments-api}
spec:
scaleTargetRef: {apiVersion: apps/v1, kind: Deployment, name: payments-api}
minReplicas: 6 maxReplicas: 60 metrics:
- type: Pods pods:
metric:
name: rps_per_pod target:
type: AverageValue averageValue: "120"

NetworkPolicy (только Ingress-гейтвей и нужные egress):

yaml apiVersion: networking.k8s.io/v1 kind: NetworkPolicy metadata: {name: payments-restrict}
spec:
podSelector: {matchLabels: {app: payments-api}}
policyTypes: ["Ingress","Egress"]
ingress:
- from: [{namespaceSelector: {matchLabels: {gw: ingress}}}]
egress:
- to: [{ipBlock: {cidr: 10.0.0.0/8}}]  # внутренние сервисы
- to: [{namespaceSelector: {matchLabels: {svc: psp-egress}}}]

15) Чек-лист релиза (prod-ready)

Образ подписан, SBOM собрано, уязвимости — на допустимом уровне.
Манифесты проходят policy-чек (Kyverno/OPA), минимум привилегий.
Readiness/Startup probes корректны; `PDB` и `PodPriority` настроены.
Канареечный план: 5%→10%→25%→50%→100% с SLO-гейтами и авто-rollback.
HPA/KEDA + Cluster Autoscaler; warm-пул нод под событие.
Секреты из Vault/SM; конфиги версионированы; фич-флаги готовы к деградации.
Трассировка e2e включена; алерты на SLI (депозит/ставка/вывод).
DR-план и «кнопка» cutover проверены на стенде; бэкапы/PITR тестированы.
Документация: как откатить, как переключить PSP/игрового провайдера, кого звать ночью.

16) Анти-регресс и типовые ловушки

Грейс-период readiness слишком короткий → ранние 5xx при rollout.

Единый пул БД без лимитов → при скейле лавина соединений.

Секреты в переменных окружения без ротации → утечка.

Mesh без лимитов/тайм-аутов → зависания на деградирующих провайдерах.

HPA только по CPU → WS/API не успевают масштабироваться.

Резюме

Стратегии деплоя в iGaming — это сочетание надёжных контейнерных практик (безопасные образы, политика доступа), умных релизов (canary/blue-green c SLO-гейтами), правильного автоскейла (HPA/KEDA + warm-ноды для пиков), операторов для stateful-контуров, и мульти-регионального DR. Добавьте GitOps, трассировку сквозь платежи и провайдеров игр, сетевые политики и экономию через профильные NodePools — и ваши релизы станут предсказуемыми, быстрыми и безопасными для денег и игроков.