Amallar we Dolandyryş → Çalşyklaryň arasynda kontekstiň geçirilmegi

Çalşyklaryň arasynda konteksti geçirmek

1) Bu näme üçin zerur?

Çalşyk gelýär - ulgam eýýäm "ylgaýar". Hendoweriň hili MTTR-e, alertleriň sesine we goýberilişleriň durnuklylygyna gönüden-göni täsir edýär. Gowy hendower - bu çalt görkeziji, anyk töwekgelçilikler we indiki ädimler düşnüklidir.

• Hadysalar, goýberişler we üpjün edijiler boýunça kontekstiň ýitmegini aradan aýyrmak.
• Täze çalşygyň "giriş wagtyny" sagada däl-de, minutlara çenli azaltmak.
• Möhüm ýollaryň SLO-ny durnuklaşdyrmak (goýum, stawka, oýny başlamak, çykarmak).
• Aragatnaşyklary öňünden aýdyp we barlap bolýar.

2) Gowy hendoweriň ýörelgeleri

1. Standartlaşdyrylan görnüş (bir şablon, bir terminologiýa).
2. Birmeňzeş artefaktlar (şol bir daşbordlara/biletlere/runbook 'i baglanyşyklary).
3. Taýmboks (gysga "brifing" + "longrid" ýazmaça görnüşde).
4. Actionable: ahyrynda - "kim/näme/haçan" meseleleriniň aýdyň sanawy.
5. SLO-ugrukdyryş: "Wakalaryň ýazgysy" däl-de, SLO/ýalňyşlyklar boýunça status.
6. Yzarlanylyşy: islendik fakt artefakt bilen tassyklanýar.

3) Rollar we jogapkärçilik

Lead çalşygy (gidýän): hendower bukjasyny taýýarlaýar, brifing geçirýär.
Lead çalşygy (kabul ediji): soraglary/töwekgelçilikleri düzedýär, kabul edilendigini tassyklaýar.
Waka-dolandyryjy: wakanyň wagtlaýynyny/kanalyny täzeleýär, täzelenmeleriň SLA-syny yzarlaýar.
Domen eýeleri (Payments/Bets/Games/KYC): öz bölümleri boýunça "status we töwekgelçilik" berýärler.
SRE/Observability: artefaktlary goldaýar (daşbordlar, neşirleriň düşündirişleri, alertler).

4) Taýming we kanallar

Çalşykdan T-30 minut öň: gidýän çalşyk ýagdaýy doňdurýar, şablony täzeleýär.
T-10 min: sesli/wideo kanalda çalt brifing (iň köp 15-20 minut).
T 0: "#ops -handover" umumy kanalynda hendower bukjasyny çap etmek.
T 15 min: Kabul edýän smena kabul edilendigini tassyklaýar we açyk soraglary aýdyňlaşdyrýar.
Eskalasiýa: ähli "gyzyl" nokatlar birbada degişli toparyň kanalyna.

5) Hendower bukjasynyň gurluşy (şablon)

Handoff - <date, time, TZ>
Shift: <outgoing> → <receiving>
Overall SLO status (last 4h):
- API p95/p99: <values/trends>
- Error rate: <values/trends>
- Queue lag/DB connections/Cache: <brief>
Critical incidents:
- <INC-123>: status, impact, next update ETA, links (ticket, channel, postmortem draft)
Providers (PSP/KYC/studios):
- PSP-X: quotas/errors/fake <links>
- KYC-A: Webhook delays <links>
Releases/Features:
- In progress: <service>, stage (canary X%), gate/metrics, risk
- Scheduled: windows/locks/dependencies
Risks and observations:
- <briefly, with links and graphs>
Action items (before <time>):
- [Owner] <task>, readiness criterion
Useful links:
- Dashboard Overview, dependency map, escalation matrix, runbook 'and
On-call contacts:
- Domains/Names/Channels

6) Mini-SOP hendower

1. Gidýän çalşyk relizleriň we dashbordlaryň (SLO, üpjün edijiler, nobatlar) düşündirişlerini täzeleýär.
2. Soňky 4 sagadyň dowamynda "gyzyl" alertleri barlaýar, statusyny/sebäbini düzedýär.
3. "Töwekgelçilikler we gözegçilikler" bölümini täzeleýär (tendensiýalar/şübheler, faktlar däl).
4. Möhletler we eýeler bilen Action items doldurýar.
5. Brifing geçirýär: 10-15 minut, berk şablon boýunça.
6. Kabul ediji smena sorag berýär; zerur bolsa - eýeleriň derrew güýçlenmegi.
7. Kabul edilendigini tassyklamak: "alyndy, soraglar/ýok", ilkinji ädimleriň sanawy.

7) Hendoweriň hil ölçegleri (KPI)

Handoff Quality Score (HQS) - çek sanawy boýunça paket (0-100).
Handoff Time - brifingiň dowamlylygy (maksatly koridor 10-20 minut).
Acknowledgement SLA - kabul edilendigini tassyklamak ≤ 15 minut.
Missing Context Rate - çalşykdan soň "kontekstiň ýitmegi" bilen baglanyşykly hadysalaryň paýy.
Post-Handoff Incident Spike - ilkinji 60 minutda alertleriň/hadysalaryň köpelmegi.
Action Items SLA - çalşykdan soň wagtynda ýapylan meseleleriň paýy.

8) Bukjanyň hiliniň çek-sanawy (HQS bahasy)

• SLO/esasy metrikler tendensiýalar bilen 4 sagadyň içinde dolduryldy.
• "Gyzyl" aladalaryň hemmesi sebäpler/baglanyşyklar bilen sanalandyr.
• Hadysalar: belgisi, ýagdaýy, täsiri, indiki täzelenme (wagt).
• Üpjün edijiler: kwotalar/ýalňyşlyklar/feýlower, soňky üýtgeşmeler.
• Neşirler/fiçler: basgançak, töwekgelçilikler, geýtler/kanareýka.
• Action items: eýesi, möhleti, taýynlyk ölçegi.
• Baglanyşyklar: dashbordlar, kanallar, runbook 'i, eskalasiýa matrisi.
• On-call aragatnaşyklary we ätiýaçlyk aragatnaşyk kanallary.

9) Daşbordlar "hendower üçin" (iň az)

Operations Overview: p95/p99, error rate, capacity headroom, queue lag.
Incidents Board: açyk hadysalar, täzelenmeler ETA, täsir.
Release & Feature: kanareýkalar, "öň/soň" deňeşdirme, awtogeýtler.
Providers Panel: kwotalar, wagtlar, cost/1k calls, geçişler.
Dependency Map: problema gapyrgalary (latency/errors/retries).

10) Hendowerleriň hili üçin alertler (ideýalar)

ALERT HandoffNotPublished
IF handoff_published == 0 AND within(10m, shift_change) == true
LABELS {severity="warning", team="ops"}

ALERT HandoffAckSLA
IF handoff_ack_minutes > 15
LABELS {severity="warning", team="ops"}

ALERT MissingActionOwners
IF count_over_time(handoff_action_items{owner=""}[1h]) > 0
LABELS {severity="warning", team="ops"}

ALERT PostHandoffIncidentSpike
IF incidents_rate_60m_after_shift > baseline_14d 1. 5
LABELS {severity="info", team="ops"}

11) Aragatnaşyklar we täzelenmeleriň formaty

[HH: MM] Handoff published. SLO OK/Degraded. Incidents: INC-123 (ETA 18:30), releases: bets-api canary 10%. Risks: PSP-X 85% quota. Action items: @ squad-payments until 7pm to check out the feilover.

• Möhüm nokatlar üçin hususy söhbetdeşliklersiz - diňe umumy kanallar.
• Islendik "gyzyl" zona - eýeleri bilen haýal etmän baglanyşykly.
• Ähli çözgütler/ylalaşyklar - maglumatlara salgylanmak bilen ýazmaça görnüşde.

12) Domen aýratynlyklary (iGaming)

Payments: ileri tutulýan ugur: goýumy öwürmek we ygtyýarlandyryş wagty, PSP feýler ugurlary, üpjün edijiler boýunça çäkler.
Bets: koeffisiýentleri/nagt pullary täzelemek, akym/nobata ýüklemek, hasaplamalaryň gijikdirilmegi.
Games/Live: ýaýlym çäreleri (jekpotlar/akymlar), websoketleriň çäkleri, UI-leriň zaýalanmagy.
KYC/AML: barlaglaryň nobaty, üpjün edijileriň SLA-lary, iň ýokary derejelere duýgurlyk.

13) Anti-patternler

Hendoweriň erkin "erkin görnüşi" (her kim isleýşi ýaly ýazýar).
Kabul edilendigini tassyklamak üçin möhlet ýok.
Action items we eýeleri bolmadyk paket.
Hendower SLO/töwekgelçilikleriň ýerine "log okamaga" öwrülýär.
Hususy söhbetdeşliklerde gizlin çözgütler - yzarlanmagyň ýoklugy.
Şablonda artefaktlara salgylanmalar ýok - barlanjak zat ýok.

14) Integrasiýa we artefaktlar

Grafiklerdäki relizleriň düşündirişleri, hendowere awto baglanyşyklar.
Link unfurling: esasy metrleri öňünden görkezýän dashbordlara/biletlere baglanyşyk goýmak.
Runbook baglanyşyklary: her bir "gyzyl" zona belli bir runbook baglanyşygy bilen.
Eskalasiýa matrisa: şablonda - ýeke-täk aktual resminama.

15) Saklamak syýasaty we audit

Hendowerler - merkezleşdirilip saklanylýar (geos, senesi/wagty, awtorlar).
HQS-iň hepdelik barlagy we "erbet" hendowerleriň saýlama seljermesi.
Şablonyň barlagy - çärýekde ýa-da postmortemleriň netijeleri boýunça.

16) Çalt başlamak (30 gün)

1-nji hepde: şablony, rollary we wagty tassyklamak; piloty bir setirde uçurmak (mysal üçin, Payments).
2-nji hepde: "HandoffNotPublished/AckSLA", "hendover üçin" dashbordlary goşuň.
3-nji hepde: HQS-skorard we hendowerleriň 10% -iniň auditini giriziň.
4-nji hepde: Bets/Games/KYC-de giňeltmek, retrospektiwany geçirmek, SOP-ni täzelemek.

17) Paket üçin "töwekgelçilik kartoçkalarynyň" mysaly

Risk: PSP-X hits 90% quota in prime time
Impact: rise in deposit refusals, SLO payments at risk
Signals: outbound_error_rate, quota_usage_ratio
Mitigation: raise PSP-Y up to 20% of traffic in advance, enable token cache
Owner/ETA: integrations@oncall / до 18:00

18) FAQ

S: Brifing gijikdirilse näme etmeli?
A: Berk taýmboks we "brifingden soň trada" düzgüni. Bukjada asinxron taýdan tanyşmak üçin hemme zat bolmalydyr.

Q: "Hakykatyň dürli görnüşleri" bilen nähili göreşmeli?
A: Artefaktlary birleşdirmek: ýeke daşbordlar, neşirleriň düşündirişleri, SLA üçin SSOT; Diňe olara ýüz tutmak.

Q: Brifing ýazmaly dälmi?
A: Hawa, jedelli ýagdaýlar we okuw üçin. Ýöne ýazgy standartlaşdyrylan ýazmaça bukjanyň ornuny tutmaýar.