Operatorlarni mashq qilish va o’qitish

1) O’qitish dasturining maqsadlari

MTTA/MTTRni qisqartirish va birinchi martadan to’g "ri harakat qilish ehtimolini oshirish.
Reaksiyani standartlashtirish: pleybuklar, eskalatsiya matritsasi, komms shablonlari.
Jamoaning barqarorligini saqlash: yukni taqsimlash, ishonch, xavfsizlik madaniyati.
Docs/GitOps, LMS, muntazam revyu kabi bilimlarni takrorlash.

2) Kompetensiya profillari (Skill Matrix)

3) O’quv modullari (dastur yadrosi)

1. SLO & Hodisalar metrikasi: SLI/SLO, burn-rate, MTTD/MTTA/MTTM/MTTR.
2. Eskalatsiya matritsasi: SEV mezonlari, tayming, rollar (P1/P2/IC/Comms).
3. Pleybuklar va runbook’i: tuzilishi, yechimlar daraxti, backout/fallback.
4. Kuzatilishi: logi/metrika/treys, reliz-annotatsiyalar bilan korrelyatsiya.
5. Change/Release: kanareyka/blue-green, avto-qaytish, xizmat ko’rsatish oynasi.
6. Security-bazis: JIT/JEA-kirishlar, sirlar, xavfsizlik hodisalari.
7. DataOps-bazis: ma’lumotlarning yangiligi/sifati, backfill, kontraktlar.
8. Kommunikatsiyalar: birinchi yangiliklar, cadence, ohanglilik va shaffoflik.

Har bir modul: 60-90 min nazariya + 30-45 min amaliyot (laboratoriya/simulyatsiya).

4) Mashg’ulotlar formatlari

Tabletop (stol stsenariylari): keysni taymlayn bo’yicha tahlil qilish; rollar chat/zalda ovoz bilan ijro etiladi.
Game Day (amaliy mashq): steyjda/nazorat qilinadigan yuklamali» prod-light» da.
Chaos-inyeksiyalar: SLO gardreyllari bilan nuqtaviy nosozliklar (tarmoq/qaramlik xatolari).
Runbook-drills: chek varaqlari bo’yicha «ko’r-ko’rona» (qaytarish, provayderni almashtirish, sertifikatni almashtirish).
On-call Shadow: ustoz nazorati ostida «soyada» 2-4 smena.
Hotwash/AAR: mashg’ulotlardan so’ng darhol - tahlil qilish, yaxshilanishlarni qayd etish.

5) Taqvim va ritm

Har haftada: bitta rol/servis bo’yicha 1 ta qisqa tabletop (30-45 daqiqa).
Har oyda: ustuvor Tier-0/1 stsenariylari bo’yicha 1 game day (2-3 soat).
Har chorakda: DR-mashq (failover/failback) + xavfsizlik-hodisa.
Katta oʻzgarishlardan soʻng: yangi pleybuk/jarayon boʻyicha maqsadli drills.

6) Operator onbordingi (4-6 hafta)

1. Ned. 1: bazaviy modullar (SLO, matritsalar, pleybuklar), kirish joylari read-only, dashbordlar bo’yicha «tur».
2. Ned. 2: laboratoriyalar: loglar/treyslar, qum qutisida pleybuklarni ishga tushirish, komms shablonlari.
3. Ned. 3: shadow-smena (2-3 slot), P1 kabi mini-tabletop.
4. Ned. 4: mini game day: relizni qaytarish, provayderni almashtirish; P1-L1 ichki sertifikatlashtirish.
5. Ned. 5-6: P2/IC kengaytirish (trek bo’yicha), oylik game day-da ishtirok etish.

7) Sertifikatlashtirish va rollarga qo’yish

Nazariya: modullar bo’yicha test (LMS), 80% + chegarasi.
Amaliyot: ko’nikmalar chek-ro’yxati (quyida qarang) + 2 tabletop va 1 game day.
Shadow → Solo: 2-4 ta kuzatilayotgan smena → superviziya ostida 1 ta smena → mustaqil kirish.
Amal qilish muddati: 12 oy; pleybuklar/siyosatlar o’zgarganda qayta attestatsiyadan o’tkazish.

8) Ta’lim samaradorligi metrikasi

Time-to-First-Action (mashq/jangda): mediana/p95.
Pleybuk shoxining toʻgʻriligi: «ilmoqsiz»% keyslar.
Comms SLA Adherence mashqlarida: o’z vaqtida yangilanishlar ulushi.
Mahalliy MTTA/MTTR simulyatsiyalarda vs. jangovar ko’rsatkichlar.
Coverage: chorak davomida mashq qilingan% on-call (maqsad ≥ 90%).
Defect Rate pleybuklari: mashqlardan soʻng topildi/tuzatildi (CAPA).
Puls so’rovi (NPS smenalari): ishonch/yuk, QoQ tendentsiyasi.

9) Shablonlar va chek-varaqlar

9. 1 Tabletop chek-listi (yetakchi)

• Maqsad/SEV/Rol tasmasi eʼlon qilindi.
• Taymline: T0, Detected, Ack, Declare, Mitigate, Recover.
• Pleybukning asosiy chorrahalari o’tdi.
• Komms shablon toʻldirilgan (birinchi yangilanish va cadence).
• Xulosa: 3-5 ta yaxshilanish (pleybuk/alertlar/dashbordlar).

9. 2 Chek varaqasi game day

• Stend/» prod-light», test ma’lumotlari, orqaga qaytish va gardreylar tayyor.
• Ssenariylar: kamida 2 ta (masalan, provayder va DB).
• SLO monitoringi va reliz izohlari faol.
• Evidence daftari: grafiklar, loglar, qadamlar vaqti.
• AAR tugaganidan 30 daqiqa o’tgach; CAPA ishga tushirildi.

9. 3 P1 ko’nikmalar xaritasi (parcha)

SLO Triage: (4-level scale)
Playbook launch:
Comms first update:
Feature flags/limits:
Release rollback:
Logs/Trails:

9. 4 O’quv kartochkasi (shablon)

ID: TR-2025-11-GD-PAY
Format: Game Day
Scenario: PSP-A degradation in EU (SEV-1)
Goals: TTFA≤10m, correct playbook branch, first update ≤15m
Gardrails: payment_success ≥98% on test traffic
Stages: canary 1%→5%→25%, switchover, rollback
Team: IC, P1, P2, Comms, Vendor
Evidence: graphs, logs, timeline
CAPA owners/deadlines:...

9. 5 Birinchi apdeytning mini-shabloni (mashq)

Impact: EU payment delays, -2. 8% to SLO (test traffic).
Diagnosis: confirmed by quorum; PSP-A increased latency.
Action: PSP-B overweight 30%→70%, degrade-UX included.
Next update: 14:30 UTC.

10) Asboblar va avtomatlashtirish

LMS/Docs-as-Code: kurslar, testlar, pleybuklar va SOP versiyalari.
Alert simulyatori: burn-rate, kvorum, bo’ron (Page Storm drills uchun).
Komms-bot: yangilanish namunalari, taymerlar, cadence nazorati.
Bogʻliqlik emulyatorlari: PSP/KYC/CDN provayder stsenariylari uchun.
Avto-ekstrakt evidence: grafiklarga, reliz-izohlarga, loglarga havolalar.

11) Jarayonlar bilan aloqa

Mashqlar natijalari → Alert Review, Postmortem Review, Change Advisory.
Pleybuklar/alertlarni yangilash - PR orqali, majburiy «dry-run» trening bilan.
Katta xizmat ko’rsatish oynalari/relizlar arafasida mashg’ulotlar o’tkazilishi shart.

12) Anti-patternlar

O’lchanadigan maqsadlar va evidence bo’lmagan «ko’rsatkich uchun» mashg’ulotlar.
Juda kam uchraydigan mashqlar → ko’nikmalarni buzadi.
Faqat amaliyot va shadow-smenasiz nazariya.
Gardreylsiz o’quv mashg’ulotlari → stend yoki prodni buzish xavfi.
CAPA yoʻq → bir xil xatolar takrorlanadi.
Komms mashg’ulotlarining yo’qligi - yaxshi fikslar, lekin yomon xabarlar.

13) Joriy etish yo’l xaritasi (4-8 hafta)

1. Ned. 1: Skill Matrix, modullar dasturini, sertifikatlash mezonlarini belgilash.
2. Ned. 2: LMS ishga tushirish, 10 ta asosiy pleybuk va 2 ta tabletop stsenariylarini tayyorlash.
3. Ned. 3: shadow-smenani boshlash, Tier-0 1 game day o’tkazish.
4. Ned. 4: haftalik tabletop-ritm, komms-bot, alertlar simulyatorini joriy etish.
5. Ned. 5-6: DataOps/Security ga kengaytirish, chaos in’ektsiyalarini qo’shish.
6. Ned. 7-8: barcha on-call P1-L1 sertifikatlash, choraklik DR-kunini o’tkazish.

14) Jami

Mashg’ulotlar va mashg’ulotlar doimiy sikldir: nazariya → amaliyot → soyada o’zgarish → jangovar mashqlar → AAR → CAPA → pleybuklarni yangilash. Bunday ritmda jamoa pleybuklar bo’yicha ishonchli harakat qiladi, eskalatsiya va SLO matritsasiga rioya qiladi, MTTA/MTTRni pasaytiradi va aloqa sifatini saqlab qoladi - biznes esa oldindan aytib bo’ladigan va etuk operatsion funksiyani oladi.