Стратегияҳои бозгашт ва релизҳои атомӣ

Стратегияҳои бозгашт ва релизҳои атомӣ

1) Чаро ба шумо суръати тез лозим аст

• Кам кардани MTTR ба дақиқаҳо.
• Маҳдуд кардани радиуси таъсир (истифодабарандагони/амалиётҳои ҳадди ақали зарардида).
• Нигоҳ доштани тамомияти маълумот ва мутобиқати шартнома.

Калид: Сохтани релизҳо, то ин ки бознишастагӣ як амали ночиз аст, на лоиҳаи хурд.

2) Мафҳуми "озодкунии атомӣ"

Барориши атомӣ - вақте ки ворид кардани версия/рафтори нав метавонад аз ҷониби як амали атомӣ бидуни таъсири пойдор иҷро карда шавад (ва бекор карда шавад).

• Артефакти тағйирнопазир (тасвири/бастаи имзошуда).
• Конфигуратсияҳои санҷидашуда (версияҳои таблиғотӣ, на таҳрирҳои дастӣ).
• Ҷудосозии "расонидан" аз "фарогирӣ" (масир/парчамҳо).
• Схемаи мувофиқи маълумот (ҳарду шакл метавонанд ҳамзамон зиндагӣ кунанд).
• Runbook runback: як қадами равшан (иваз кардани селектор/вазн/парчам) + санҷиш.

3) Инвентаризатсияи техникаи Rollback

3. 1 Қабати ҳаракат (зудтарин)

Кабуд-Сабз: Селектори гурӯҳи/мақсаднокро ба версияи устувор гузаред.
Канария: Вазни камтар то 0% ва пешравиро ях кунед.
Дарвоза/NGINX/Service Mesh: бозгашт ба вазн/хатсайрҳои қаблӣ.

3. 2 Сатҳи конвейер

Rollouts Helm/Argo: 'исқоти ҳамл/бозгашт' ба нусхаи қаблӣ.
Gits: MR-ро баргардонед/ӯҳдадор шавед, ки анборҳоро нишон диҳед (назоратчӣ боқимондаҳоро иҷро мекунад).

3. 3 Замима/хусусиятҳо

Хусусиятҳои парчамҳо/kill-switch: Роҳи хатарнокро фавран хомӯш кунед.
Тумблери конфигуратсияҳо: Ба тирчаи пештараи конфигуратсия баргардед.

3. 4 Маълумот

Муҳоҷирати пешрафта (афзалиятнок) + мутобиқат.
Барқароркунии саривақтӣ (PITR) ва нусхаҳои эҳтиётӣ барои садамаҳо.
Ҷуброн (Saga) ва беэътиноӣ барои амалҳои баръакс.

4) "васеъ кардани → migrate → шартнома"

Барои бехатарӣ баргаштан, схемаи маълумот бояд имкон диҳад, ки версияҳои кӯҳна ва нав якҷоя зиндагӣ кунанд.

1. Васеъ кардан - бе шикастани мантиқи кӯҳна майдонҳо/индексҳои нав (бефоида) илова кунед.
2. Муҳоҷират - навиштан/хондани дукарата, пур кардан, корҳои пасзамина бо номутаносибӣ.
3. Шартнома - пас аз 100% баромадан ва тирезаи устувор майдонҳо/рамзи кӯҳнаро нест кунед.

5) Дарвозабони SLO ва гардиши худкор

Даромадгоҳ ба ҳар як марҳилаи озодкунӣ бояд аз рӯи ченакҳо "ҳифз карда шавад".

SLO-ҳои техникӣ: таъхири p95/p99, 5xx-сатҳи, пуррагӣ (CPU/Memory), сӯзондани буҷаи хатогӣ.
Нишондиҳандаҳои тиҷорат: CR барои пасандоз/пули нақд, рад кардани пардохт, фоизи қаллобӣ, хатогиҳои KYC.

• 5xx> 0. 5% 10 дақиқа → бозгашт.
• p95 egn> 20% маълумоти ибтидоӣ → hold + таҳлил.
• Хатои PSP> 0. 3 саҳ. → бозгашт + масири пардохт.

6) Намунаҳо: Кубернетес/Ҳелм/Арго/NGINX

6. 1 Кабуд-Сабз (K8s интихобкунандаи хидмат)

yaml
Service points to "blue"; switch to green - change selector apiVersion: v1 kind: Service metadata: {name: app-svc}
spec:
selector: { app: app, version: blue }
ports: [{ port: 80, targetPort: 8080 }]

Rollback = селекторро ба 'кабуд' баргардонед (атомӣ, дубора насб карда намешавад).

6. 2 Канария (Истио Виртуалӣ Веса)

yaml http:
- route:
- destination: { host: app, subset: stable } # 100 weight: 100
- destination: { host: app, subset: canary } # 0 weight: 0

Rollback = вазн canary → 0, устувор → 100.

6. 3 Argo Rollouts - исқоти ҳамл

yaml kubectl argo rollouts abort app # stop and return to stableService

6. 4 чарх - бозгашт ба бознигарӣ

bash helm history app -n prod helm rollback app 17 -n prod # revert to revision 17

6. 5 NGINX - вазни болооб

nginx upstream app {
server blue:8080 weight=100;
server green: 8080 weight = 0; # rollback - return 100/0
}

7) Хусусиятҳои парчамҳо ва куштани гузариш ҳамчун "парашют"

Kill-switch барои ҷараёнҳои дорои хавфи баланд (пасандозҳо/пардохтҳо/мукофотпулӣ) - ҳатмӣ.
Устуворӣ: ба корбарон додани "вариант" тавассути калиди ҳаш - муқоисаи пешгӯишаванда.
Бехатарӣ: агар сервери парчам дастнорас бошад, бо нобаёнӣ бехатар аст.

ts const enabled = flags. bool("new_cashout_flow", false);
if (! enabled) return classicFlow () ;//instant rollback - disable the return newFlow () flag;

8) Шартномаҳои API ва чорабиниҳо: Чӣ гуна набояд "шикастани гардиш"

Шартномаҳои версияӣ (OpEN API/GRPC/Avro): версияи нав майдонҳоро илова мекунад, семантикаи кӯҳнаҳоро тағир намедиҳад.
Гузаронидани ҳодисаҳо: 'type = v2', аз истеъмолкунандагон талаб карда мешавад, ки майдонҳои номаълумро сарфи назар кунанд.
Outbox + Idempotency: ҳама гуна такрори ҳодиса бехатар аст, истеъмолкунанда бефоида аст.

9) Амалиётҳои ҷуброншаванда (Saga)

• Аз ҳисоб баровардан - ҷуброн: бозгашт, баргардонидан, сабти ислоҳ.
• Сабт дар маҷаллаи амалиётҳои ҷубронӣ ва бозхонди пеш аз муваффақият.
• Калидҳои Idempotent барои ҳар як амалиёт.

json
{
"sagaId": "b7d2...",
"action": "withdraw. execute",
"idempotencyKey": "user123:withdraw:7845",
"compensation": "withdraw. refund"
}

10) Конфигуратсияҳо ва асрори: Бозгашт ҳамчун версия

Store ҳамчун артефактҳои версия (semver/commit-sha) конфигуратсия мекунад.

Rollback = конфигуратсияро ба версияи қаблӣ баргардонед (Git

Асрҳо - тавассути нигаҳдорӣ (KMS/Vault); гардиш ва версия ба озодкунӣ дохил карда мешаванд.

11) Rollback runbook (ҳадди аққал)

1. Прогрессияи таваққуф (канарӣ/роликҳо).
2. Бозгашти трафик (вазн/селектор).
3. Санҷишҳои андозагирии SLO/бизнес ба марҳилаи аввал бармегарданд.
4. Ба эътидол овардани ҷойҳои кории пасзамина (агар лозим бошад, муҳоҷиратро қатъ кунед/бозгашт пур кунед).
5. Ҳодисаҳо ва пас аз фактҳо: артефактҳо (гузоришҳо/роҳҳо/ченакҳо), гипотезаҳо, ислоҳ.
6. Тозакунӣ: парчамҳоро пӯшед, рамзи чапро хориҷ кунед, ҷадвалҳои кориро баргардонед.

12) Сиёсати худкори муҳофизат

Барчаспҳои "охирин" ва мутатсидаро барои тасвирҳо манъ кунед.
Назорати қабул: танҳо артефактҳои имзошуда.
Дарвозаи CI: SAST/SCA/Policy-checks бояд барои таблиғ сабз бошад.
Тирезаҳоро ях кунед: релизҳо/вазнҳо> X% дар давраи хатар.

13) Анти-намунаҳои зуд-зуд

Мо ба ҷои мутобиқат пойгоҳи DDL-ро "бармегардонем" - қуфлҳои дароз/вақти корӣ.
Муҳоҷирати фаврӣ ба сар-сари бе беақлӣ ва бозгашт.
Омезиши "расонидан" ва "фарогирӣ" - ҳеҷ роҳе барои зуд баргардонидани трафик вуҷуд надорад.
Таҳрири дастӣ дар конфигуратсияи истеҳсолӣ бидуни аудит.
Не пардохт/баромади пардохт.
Артефактро барои прод барқарор кунед (вайрон кардани "як бор сохтан - бисёр кор кардан").
Ягон тугмаи rollback/runbook кор намекунад.

14) Рӯйхати санҷиши амалисозӣ (0-45 рӯз)

0-10 рӯз

Ба хидматҳои калидӣ Blue-Green/Canary дохил кунед.
Рад кардани 'охирин', имкон додани имзои тасвир ва таърихи Helm/Argo.
Панелҳои SLO-ро пайваст кунед (ниҳонӣ, 5xx, сигналҳои асосии тиҷорат).

11-25 рӯз

Амалисозии гузариши куштор барои ҷараёни хатар.
Табдили муҳоҷирати пойгоҳи додаҳо барои тавсеа-муҳоҷират-шартнома + номутобиқатӣ.
SLO auto-stop/rollback-ро илова кунед (Argo Analysylve/Template/alerts).

26-45 рӯз

Конфигуратсияҳои versioning (GIT), бозгашт тавассути MR-revert.
Китоби кориро ба "бозии рӯз" (моделиронии ҳодиса ва бозгашт) иҷро кунед.
Ҷубронпулии Saga-ро ворид кунед, ки дар он ҷо бозгашт ба поён имконнопазир аст.

15) Нишондиҳандаҳои камолот

Rollback MTTR: ҳадаф <5 дақиқа.
% релизҳо, ки дар он гардиш = гузариши масир/парчам (барқарор карда намешавад)> 90%.
Ҳиссаи муҳоҷирати васеъшаванда-шартномавӣ> 90%.
Пӯшонидани хидматҳои гузариш бо парчамҳо> 95%.
Шумораи ҳодисаҳо аз сабаби нақшаҳои/шартномаҳои номувофиқ → 0.

16) Барномаҳо: қолабҳои хурд

Истгоҳи Argo AnalysIs 5xx Stop

yaml apiVersion: argoproj. io/v1alpha1 kind: AnalysisTemplate metadata: { name: guard-5xx }
spec:
metrics:
- name: http_5xx_rate interval: 1m successCondition: result < 0. 005 provider:
prometheus:
address: http://prometheus. monitoring:9090 query:
sum(rate(http_requests_total{app="app",status=~"5.."}[5m])) /
sum(rate(http_requests_total{app="app"}[5m]))

Кубернетҳо: Рафъи фаврии ҷойгиркунӣ

bash kubectl rollout undo deploy/app -n prod

Ҳелм: Нашри атомӣ

bash helm upgrade --install app chart/ \
--atomic \
--timeout 5m \
--set image. tag=v1. 9. 3

NGINX: Крани канарӣ

nginx map $cookie_canary $weight {
default 0;
"~ on" 10; # enable 10% by cookie
}

17) Хулоса

Бозгашти боэътимод ин "тугмаи оташ" нест, балки моликияти меъморӣ: артефактҳои тағйирнопазир, ҷудокунии таҳвил ва фарогирӣ, нақшаи мувофиқи маълумот, парчамҳои хусусӣ ва дарвозаҳои SLO. Сохтани релизҳои атомӣ, дафтарчаи репетитсионӣ ва автоматикунонии дарвозаҳои амниятӣ - ва ҳама гуна озодкунӣ дар дақиқаҳо бидуни дард барои тиҷорат ва корбарон бармегардад.