Ҳамкории гурӯҳҳо дар амалиёт

1) Чаро

Платформаи IGaming даҳҳо доменҳо мебошад (Пардохтҳо, Бозиҳо/Core, Хавф/KYC, Маълумот, Инфра/SRE, Дастгирӣ, Мувофиқат). Бидуни ҳамоҳангсозии расмӣ, MTTR, CFR ва хатарҳои амалиётӣ меафзоянд. Ҳадаф табдил додани функсияҳои нобаробар ба як системаи амалиётӣ: алоқаҳои пешгӯишаванда, навбатҳои шаффоф, сигналҳои умумӣ ва афзалияти пайваста.

2) Принсипҳо

1. SLO-аввал: қарорҳои муштарак бо буҷаҳои SLO/хатогӣ алоқаманданд.
2. Манбаи ягонаи ҳақиқат: панелҳои маъмулӣ, статусҳои ягона ва артефактҳо.
3. Ҳудудҳо ва интерфейсҳои возеҳ: ҳар як ҷуфт фармонҳо шартномаи тавсифшуда доранд (OLA/Runbook/API).
4. Маҷмӯаҳои хурд ва тағирёбанда: тағирот тавассути phicheflags/canary, суръати тез.
5. Не айб - ҳа маълумот: таҳлили далелҳо, такмилҳо - қисми ҳатмии давра.
6. Имтиёзҳои ҳадди ақали талабшаванда ва So-D: ҷудокунии нақш барои амалиёти ҳассос.
7. Реҷаро автоматӣ кунед, боқимондаҳоро стандартӣ кунед.

3) Нақшҳо ва RACI (ба охир мерасад)

Роҳбари Ops/SRE Lead соҳиби чаҳорчӯбаи амалиётӣ KPI/KRI мебошад. А.

Соҳибони хизматрасонӣ (Пардохтҳо/Бозиҳо/KYC/Маълумот) - ҳадафҳои домейн, тағирот, хатар. A/R

Платформа/Инфра - дастрасӣ, иҷро, релизҳо/канарейкаҳо. Р

Хавф/Мувофиқат/Амният - So-D, RG/KYC/PII, санҷишҳо. C/A

Дастгирӣ/CRM - пеши шикоятҳо, иртибот бо бозингарон. R/C

Занг ба IC/CL - идоракунии ҳодисаҳо ва навсозиҳои беруна. Р

Мудири озодкунӣ - тақвим, CAB, ҳолати тағирот. Р

Маълумот/таҳлил - ченакҳои маҳсулот ва амалиёт, дастгирии RCA. R/C

4) Шартномаҳои ҳамкорӣ (OLA/SL bx)

• Соҳаҳои масъулият: майдони кӣ (масалан, масири PSP - Пардохтҳо; кэш/DB - Инфра).
• Ҳадафҳо/ҳадди ниҳоӣ: MTTA ҳодиса, вақти вокуниш ба шиддат, равзанаи пас аз назорат.
• Навбатҳо ва афзалиятҳо: P1-P4, танқиди тиҷорат, ях кардани тирезаҳо.
• Интерфейсҳо: каналҳо, фармонҳои бот, API/Runbook, феҳристҳои соҳибон.
• Артефактҳо: барои ҳамроҳӣ кардани ин ҳодиса кадом ҳуҷҷатҳо/гузоришҳо/панелҳо лозиманд.

5) Каналҳо ва протоколҳои иртиботӣ

Чат амалиётӣ (баст): навсозиҳои ҳаррӯза, расму оинҳои хурд, таҳвил.
Ҳуҷраҳои Var барои ҳодисаҳо: аз ҷониби бот сохта шудаанд; Нақшҳои IC/CL бо фармон таъин карда мешаванд.
Канали CAB/Тағйир: муҳокимаи тағирот, хатарҳо, тақвими озод.

Хулосаҳои танҳо SLO/Ҳодиса/Фаъолияти банақшагирифташуда

Афзоиш: қолибҳои фармон '/саҳифа ', '/афзоиш', гузориши SLA.

Протоколи ягонаи паём: "факт → таъсир → ETA/ETR → равзанаи навбатии навсозӣ → соҳиби".

6) Таҳвил байни бастҳо ва минтақаҳо

1. SLO/SLI: хатари сӯхтани буҷа дар куҷост.

2. Ҳодисаҳои кушод/авҷгирӣ ва ETA-и онҳо.

3. Корҳо/релизҳои банақшагирифташуда дар давоми 24-48 соати оянда.

4. Таъминкунандагон (PSP/KYC/студияҳо): чиптаҳои фаъол, интизориҳо.

5. Таркиби зангҳо ва тамосҳо (IC/CL/доменҳо).

6. "Рӯйхати назоратӣ" - соҳаҳои таваҷҷӯҳи зиёд (навбатҳо/нусхабардорӣ/кэш).

Таҳвил дар дафтари баст, пайвандҳо - ба var-ҳуҷраҳо ва панелҳо сабт карда мешавад.

7) Ҳамкории ҳодисаҳо

Оғоз: ҳушдор → бот корти '# inc-YYYY-MM-DD-XXX' -ро эҷод мекунад, IC/CL ва домейнро роҳбарӣ мекунад.
Як қоидаҳои овоздиҳӣ: IC қарори ниҳоӣ аст; CL - алоқа.
Далелҳо ва фарзияҳо: мо ҷудо мешавем; сигналҳои "сурх" - афзалият.

Гвардияҳо: масири phicheflags/масири PSP танҳо тавассути runbook бо So

Иртибот: лоиҳаҳои навсозиҳои оммавӣ тавассути CL, шарикон - ҳадафмандона.
Пӯшида: вазифаҳои пас аз мониторинг, тавлиди пас аз марг ва такмили вазифа бо соҳибон/мӯҳлатҳо.

8) Ҳамкорӣ дар тағирот

Тақвими озод: оммавӣ, бо давраҳои яхкунӣ ва ҷойҳои занг.
Дарвозаҳои сифат: воҳиди/шартнома/e2e, амният, марҳилаи дарвозаҳои SLO.
Ғалтаки канарӣ: қадам ба қадам 5% → 25% → 100% барои GEO/иҷорагирон/бонкҳо.
Бозгашти худкор: сиёсатҳо аз ҷониби калиди SLI/KRI, маҷаллаи WORM.
Бастаҳои Comm: лоиҳаи навсозиҳо бо CL/Legal пешакӣ мувофиқа карда шудаанд.
Тағироти RACI: RM (A/R), SO (A/R), SRE (R), Sec/Мувофиқат (C/A), CAB (A), IC/CL (R/C).

9) Телеметрия ва артефактҳои ягона

Феҳристи ченакҳои умумӣ: SLI/SLO, ченакҳои корӣ, KRI (навбатҳо, PSP, нусхабардорӣ).
Панели назоратӣ "Харитаи амалиётӣ": хулоса аз рӯи доменҳо, минтақаҳо, ҳолати ҳодисаҳо/корҳо.
Вақтҳо: формати ягона (вақт, муаллиф, амал, натиҷа, пайвандҳо).
Пас аз қатл: қолаби бидуни пардохт, чораҳои пешгирӣ, санаи таҷдиди назар.
Дафтарчаҳо/Рӯйхати назоратӣ: санҷидашуда; истинод аз огоҳиҳо ва кортҳои ҳодиса.

10) Афзалият ва банақшагирӣ

Нақшаи ҳафтаинаи Ops (30-45 дақиқа): ҳамоҳангсозии хатарҳои болоӣ, релизҳо, маҳдудиятҳо, беҳбудиҳо пас аз марг.
Канбан амалиётҳо: сутунҳои 'Backlog → Тайёр → Дар пешрафт → Тасдиқ → Иҷро карда шуд', маҳдудиятҳои WIP.
Меъёрҳои афзалиятнок: таъсир ба SLO/даромад/мувофиқат, андоза/бозсозӣ, вобастагӣ аз провайдерҳо.

11) Матритсаи афзоиш (фишурдан)

12) Сиёсатҳо ва СО

SoD/4-eyes: хулосаҳо/бонусҳо/масири PSP/содироти PII - танҳо бо тасдиқи дугона.
Ҳуқуқҳои JIT: афзоиши муваққатии имтиёзҳо барои амалҳои дафтарча.
Сиёсати маълумот: манъи PII дар каналҳои кушода/панели панелҳо; гео-марзҳо.
Аудит - гузоришҳои тағйирнопазири фаъолият (WORM), таҷдиди сиёсат.

13) Воситаҳои ҳамкорӣ

Бот ҳодиса: '/ҳодисаи нав ', нақшҳо, таймерҳои навсозӣ, нақшаҳои comm, '/runbook', '/flag ', '/config'.
Metrics API: намуди умумии SLO ва KRI, намунаҳо (trace_id) барои RCA.
Озод-портал: зуҳурот, дарвозаҳо, ҳолати ғалтак/бозгашт.
Феҳристи соҳибон/CMDB: доменҳо, алоқаҳо, каналҳои эҳтиётӣ.

14) Метрикаҳои ҳамкорӣ (KPI/KRI)

MTTA/MTTR аз рӯи домен ва слот (рӯз/шаб), ҳиссаи ҳодисаҳои пеш аз шикоят гирифташуда.
Сифати таҳвил: нуқсонҳои интиқол (ҷузъҳои рӯйхат сари вақт пӯшида нестанд).
Ҳамкориҳоро тағир диҳед:% релизҳо бо бастаҳои омодашуда ва ҳеҷ гуна монеаҳо.
Интизоми Guardrail: басомади вайронкунии So-D/сиёсат (ҳадафи 0).
Comms Cadence: риояи фосилаҳои навсозии оммавӣ ҳангоми P1/P2.
SLA-и пас аз марг: таносуби пас аз марг ≤ D + 5, анҷом додани амалҳо.
Сарбории саҳмияҳо: Тақсими шабҳо/қуллаҳо аз ҷониби одамон/дастаҳо.
Роҳбари сигнали муштариён: Қафо байни таназзули объективӣ ва шикоятҳои аввал.

15) Харитаи роҳсозӣ (6-10 ҳафта)

Нед. 1-2: инвентаризатсияи домейн/молик; Қолабҳои OLA; оғози канали ивазкунанда ва рӯйхати назоратӣ; матритсаи густариши пойгоҳ.
Нед. 3-4: ҳодиса-бот (MVP), канали ҳолати муштарак, корти ягонаи SLO/SLI/KRI; феҳристи runbooks.
Нед. 5-6: Тақвими CAB/озодкунӣ, бастаҳои comm ва тирезаҳои ях; SoD/4-eyes барои амалиёти ҳассос.
Нед. 7-8: ғалтаки канарӣ ва гардиши худкор ҳамчун стандарт; қолаби пас аз марг, ҳамкории Exec/Ops-dashboards.
Нед. 9-10: Машқҳои P1, дастгоҳҳои байниминтақавӣ, аудити WORM, гузоришҳои KPI/KRI, тасҳеҳи OLA.

16) Қолибҳо (пораҳо)

16. 1 OLA (Пардохтҳо ↔ Infra/SRE)

yaml ola:
scope: "Payments-Auth & Routing"
contacts:
payments_so: "@pay-so"
infra_oncall: "@sre-oncall"
objectives:
mtta_p1: "≤5m"
rollback_ttr: "≤10m canary"
interfaces:
runbooks: ["psp-failover", "reroute", "auth-throttle"]
dashboards: ["auth_success", "psp_latency", "queue_lag"]
escalation:
p1: ["IC","Payments Lead","SRE L2"]
p2: ["Payments OnCall","SRE OnCall"]
artifacts:
status_templates: ["public","partners"]
postmortem_due: "D+5"

16. 2 Рӯйхати назоратӣ (10 адад)

1. Ҳолати домени SLO

2. Ҳодисаҳои кушод (ETA/соҳибон)

3. Фаъолиятҳои банақшагирифташуда/релизҳо + тирезаҳои назоратӣ

4. Таъминкунандагон (PSP/KYC/Studios) - Хатарҳо/Интизорӣ

5. Навбат/нусхабардорӣ/кэш - ақибмонӣ/аномалия

6. Тағйироти маҳдуд/Phicheflag

7. Шикоятҳо/чиптаҳо ва ҳадди ниҳоии сарборӣ

8. Нақшаҳо ва нақшаҳои ҳолати вергул

9. Таркиби занг ва захира

10. "Рӯйхати назоратӣ" дар як слот

17) Антипаттернҳо

"Оё касе муомила мекунад?" бе RACI ва соҳиби.
Ҳодисаҳо бидуни IC/CL ва таймерҳои навсозӣ.
Тағйироти пинҳонӣ (кликҳои дастӣ), не Git/Аудит.
Телеметрияи ғайримуқаррарӣ: рақамҳои гуногун дар дастаҳои гуногун.
Релизҳо бе бастаҳои comm ва канарейкаҳо.
Қонунвайронкуниҳои SOD "ба хотири суръат".
Дастӣ ба таври шифоҳӣ, бидуни сабт ва рӯйхати назоратӣ.
Пас аз қатл бидуни амал ва мӯҳлат.

Ҷамъ

Ҳамкории гурӯҳҳо дар амалиёт ҳамкории шартномавӣ мебошад: OLA/SL mx, каналҳо ва нақшҳои возеҳ, интизоми таҳвил, телеметрияи умумӣ, релизҳои ҳамоҳангшуда ва равандҳои ҳодисаҳо. Чунин чаҳорчӯба MTTR ва CFR-ро коҳиш медиҳад, афзалиятҳоро ҳамоҳанг мекунад, SLO, даромад ва мутобиқатро ҳифз мекунад ва амалиёти ҳаррӯзаро пешгӯишаванда ва устувор мегардонад.