Амалиётҳо ва § Метрикаҳои аудити идоракунӣ ва SLA

Нишондиҳандаҳои аудиторӣ ва SLA

1) Чаро ба шумо лозим аст

Агар ченакҳо хато бошанд - қарорҳо нодуруст хоҳанд буд, SLA-ҳо "дар коғаз" вайрон карда мешаванд ё баръакс барои пинҳон кардани мушкилот. Нишондиҳандаҳои аудиторӣ ва SLA кафолат медиҳанд, ки ваъдаҳо ба корбарон ва шарикон муқоисашаванда, боэътимод ва қонунӣ мебошанд.

• Таъмин намудани як "манбаи ҳақиқат" (SSOT) ва ҳисобҳои такроршаванда.
• Фарқияти байни панели панелҳо/ҳисоботҳо/биллингро кам кунед.
• SLA-ро бар асоси далелҳо созед.
• Таназзулро дар андозагирӣ барвақттар дар хидматҳо муайян кунед.

2) Мафҳумҳо ва ҳудуди асосии масъулият

Метрӣ: миқдори ченшуда (RPS, p95, CR, GGR, Меъёри муваффақият).
KPI/OKR: ҳадафҳое, ки ченакҳо бо ҳам пайванданд.
SLO: сифати мақсадноки хизматрасонӣ (масалан, "p99 ≤ 400 ms 99. 9% вақт").
SLA: ваъдаи беруна; аз ҷиҳати ҳуқуқӣ муҳим, дар асоси SLO.
OLA: созишномаи дохилӣ байни гурӯҳҳо/фурӯшандагон, SLA-ро дастгирӣ мекунад.
SSOT: система/анбор, ки маълумоташон барои ҳисобот ҳамчун истинод ҳисобида мешавад.

3) Таксономияи ченакҳо (қабатҳо)

1. Инфраструктура: CPU/Хотира/IO/Net, подкастҳо/гиреҳҳо, HPA/VPA.
2. Платформа: навбатҳо/ҷараёнҳо (ақибмонӣ, интиқол), DB/кэш (пайвастшавӣ, хит), API (p95/p99, 5xx).
3. Ҷараёни тиҷорат: амонатҳо/бозхондҳо, гаравҳо, оғози бозиҳо, иҷозатномаҳо, KYC.
4. Маҳсулот/маркетинг: табдили, ARPPU/LTV, маъракаҳо.
5. Сифати равандҳо: MTTA/MTTR, Меъёри нокомии тағирот, фарогирии рӯйхат.

Қоида: Ҳар як ченак бояд қабат, соҳиб ва формула дошта бошад.

4) Манбаъҳои маълумот ва "дуруст"

Телеметрияи онлайн: Prometheus/OTeel, гузоришҳо (ELK/Click 'House), пайгирӣ.

Чорабиниҳо ва баҳисобгирӣ: Kafka/Outbox, DWH/marts data (big

Артефактҳои дастӣ: пас аз қатл, чиптаҳо, сабти ҳодисаҳо.
Феҳристҳои беруна: ҳисоботи провайдерҳо (PSP/KYC/студияҳо), биллинг.

Ҳалли муноқишаҳо: дар сурати ихтилофот "онлайн vs DWH", танзими афзалиятнок татбиқ мешавад (масалан, барои SLA - маҷмӯаҳо аз DWH бо пайгирии манбаъ).

5) Раванди аудити метрикӣ (ҳалқаи назоратӣ)

1. Инвентаризатсия: каталоги ченакҳо/SLO/SLA (ном, соҳиб, қабат, формула, манбаъ, басомади ҳисоб).
2. Санҷиши формула: муқоисаи дархостҳои SQL/promo бо таъриф (санҷишҳои воҳиди ҳисобҳо).
3. Интихоб ва санҷиши дубора: интихоби хатҳои ҳодиса/сабти ном ва ҳамоҳангсозии дастӣ.
4. Харитаи контурӣ: муқоисаи панелҳои онлайн ва гузоришҳои DWH.
5. Назорати тағирот: баррасии формула барои релизҳои схема/мантиқӣ.
6. Аудити SLA: санҷиши дурустии маҷлисҳо ва истисноҳо (нигоҳдории банақшагирифташуда, қувваи барқ).
7. Ҳисобот ва такмилҳо: рӯйхати номувофиқатии ошкоршуда ва ислоҳот бо мӯҳлатҳо.

6) Таърифҳо ва формулаҳо (намунаҳо)

• 'муваффақият = дархостҳо - (5xx + вақт + circuit_open)'
• 'success _ rate = муваффақият/талабот'

• SSOT таърифи ягонаи тирезаро (ғелонда 5m/1h) ва агрегат (HDR/TD iest) сабт мекунад.

• 'SLO _ мавҷудияти _ моҳ = (вақти корӣ - истисноҳои имконпазир )/ҳамагӣ _ вақт'

• 'SLA _ моҳ = 99. 90% вақти корӣ аз равзанаи UTC, ба истиснои тирезаҳои банақшагирифташуда (огоҳинома), садамаҳои исботшаванда дар операторони транзитӣ (ҳуҷҷатҳо). '

7) Сифати маълумот: санҷишҳо ва огоҳиҳо

• Полнота (пуррагӣ): 'гирифта _ events/ expected_events ≥ 0. 99`.
• Саривақтӣ: ақибмонӣ ≤ N дақиқа.
• Ягонагӣ: бе калидҳои такрорӣ (idempotency-key).
• пайдарҳамӣ-маблағ/асъор/аломатҳо.
• Linearity - Ҳисобкунакҳо "баргардонида намешаванд".

ALERT MetricsIngestionLagHigh
IF dwh_ingest_lag_minutes > 15 FOR 10m

ALERT EventsCompletenessDrop
IF (events_received / events_expected) < 0. 99 FOR 15m

ALERT DuplicateEventsSpike
IF rate(events_duplicates_total[10m]) > baseline_7d 2

8) Аудити SLA/OLA: Методология

1. Тақвими истисноҳоро ҷамъ кунед: тирезаҳои банақшагирифташуда, таназзули мувофиқашуда, амалҳои фурӯшандагон.
2. Ҳисобкунии вақти корӣ: тибқи минтақаи ягонаи вақт, дар асоси SSOT.
3. Муқоиса бо ҳодисаҳо: ҷадвал, чиптаҳо, пас аз марг.
4. Атрибутсия: нобарориҳои худ, провайдер, транзит, DD MDS, нигоҳдории муқаррарӣ.
5. Периметри SLA: таҷрибаи корбар (E2E) против як API мушаххас.
6. Ҳисобот: ҳисоботи ҳармоҳа/семоҳа: воқеӣ, дуршавӣ, ҷубронпулӣ (агар лозим бошад), чораҳои ислоҳӣ.

9) Санҷиши таҷдиди ҳисобҳо

Версияи формула: Анбори анбор бо мушаххасоти SQL/Prom

Санҷишҳои воҳиди ченакҳо: оид ба маълумоти синтетикӣ (ҳолатҳои канорӣ: холигоҳҳо, нусхаҳо, ҳудуди сана).
Насли маълумот: аз панели панел то ҷадвал ва рӯйдодҳои манбаъ.
Суратҳо: маълумоти яхкунӣ барои буридан, то ҳисобҳои такрорӣ муқоиса карда шаванд.

10) Интихоб

Ҳамарӯза: 10-20 ҳодиса аз рӯи ҷараёнҳои асосӣ (амонат/меъёри/CCL) - санҷиши дастии пайгирӣ ↔ DWH.
Ҳафта: 1% намуна барои муқоиса кардани "онлайн vs DWH" дар байни агрегатҳо.
Ҳар моҳ: маҷмӯи ҳодисаҳо бо таъсири SLA - барқарорсозии муфассал.

Date/Window: 2025-10-01.. 2025-10-07
Metric: SLO_api_p99
Source A: Prometheus (rolling 5m)
Source B: DWH snapshot (1h buckets)
Deviation: + 6. 2% (A above B)
Reason: different aggregation windows
Action: align window in both contours to 5m/rolling
Term/Owner: 2025-11-10/squad-observability

11) Санҷиши панели панелҳо ва огоҳиҳо

Луғати ягонаи ченакҳо: рости луғат дар панели панел.
Эзоҳҳои релизҳо/рӯйдодҳо: барои дидани сабаби дуршавӣ.
Муқоисаи пеш аз/пас аз интишор: панелҳои регрессияи худкор.
Нусхаҳо/номувофиқатҳо: муайян кардани "ду p99s гуногун" - таҳрири формулаҳо/тирезаҳо.
Мавҷудияти панел: ҳуқуқ, захира, назорати пайванд/версия.

12) Идоракунии тағирёбии метрӣ

Раванди RFC - тағир додани формула/тиреза/манбаъ - тавассути RFC бо SLA/Арзёбии таъсири ҳисобот

Муҳоҷират "густариш → migrate → шартнома": муваққатан ҳарду версияро нигоҳ доред, муқоиса кунед ва сипас нусхаи кӯҳнаро хомӯш кунед.
Иртибот: маҳсулот/тиҷоратро пеш аз гузариш дар арзишҳо "тибқи усули нав" огоҳ кунед.

13) Хусусиятҳои IGaming/fintech

Қуллаҳои талабот: ченакҳо бояд ба бори тарканда тоб оваранд (агрегатҳо "часпида намешаванд").
Таъминкунандагон: SLA аз фурӯшандагони OLA § ҳисоботҳо, ҳолати ҳодисаҳо ва квотаҳоро нигоҳ медорад.
Арзиш: 'арзиш _ барои _ 1k _ зангҳо' ва 'арзиши муваффақият' панелҳои ҳатмӣ мебошанд.
Антифрауд/хатар: ҳассосият ба таъхирҳо ва "мусбатҳои бардурӯғ" -и ченакҳо.

14) Панели аудиторӣ (маҷмӯи ҳадди аққал)

Саломатии ченакҳо: пуррагӣ/саривақтӣ/такрорӣ, ақибмонӣ, ошиби ETL.
Далелҳои SLO/SLA: SLO ҳисобшуда, SLA воқеӣ, истисноҳо, истинод ба ҳодисаҳо/амалҳо.
Online vs DWH Муқоиса кунед: p95/p99/Success Қурб, тамоюлҳо ва тамоюлҳо.
Фурӯшанда SLA: вақти корӣ/квотаҳо/танаффус/арзиши провайдер.
Таъсири озодкунӣ: регрессияи ченакҳо пас аз ҳисобкунӣ/дохил кардани хусусиятҳо.

15) Рӯйхати санҷиши аудит (амалиётӣ)

• Феҳристи ченакҳо/SLO/SLA бо соҳибон ва формулаҳо муосир аст.
• SSOT барои ҳар як ҳисобот/панел муайян карда шудааст.
• Санҷишҳои воҳиди формулаҳо сабз мебошанд, қубурҳои ҳисобкунӣ ҳуҷҷатгузорӣ карда мешаванд.
• Огоҳиҳои сифати маълумот фаъоланд (пуррагӣ/ҷадвал/нусхабардорӣ).
• Номутобиқатии "Online vs DWH" ≤ ҳадди қобили қабул (масалан ≤ 2%).
• Истисноҳои мувофиқашудаи SLA ҳуҷҷатгузорӣ ва ба ҳисобот замима карда мешаванд.
• Намунаҳои назоратӣ гирифта шуданд ва шаҳодатномаҳо тартиб дода шуданд.
• Ҳама тағиротҳои формула RFC ва муҳоҷиратро гузаштанд.

16) Намунаҳо (пораҳо)

api_p99_ms:release:ratio =
(api_latency_p99_ms{release="after"} / api_latency_p99_ms{release="before"})

sql
SELECT event_date,
COUNT() AS received,
SUM(expected_count) AS expected,
COUNT()::decimal / NULLIF(SUM(expected_count),0) AS completeness
FROM events
JOIN expected_events USING (event_date, event_type)
WHERE event_type IN ('deposit','bet_placed','kyc_completed')
AND event_date BETWEEN:from AND:to
GROUP BY 1;

ALERT DwhVsOnlineDrift
IF abs(dwh_kpis{metric="api_p99"} - online_kpis{metric="api_p99"}) > 0. 02 online_kpis
FOR 30m
LABELS {severity="warning", team="observability"}

17) Анти-намунаҳо

Ду формулаи метрии "якхела" дар панелҳои гуногун.
Тағир додани метрика бидуни муҳоҷират ва огоҳӣ - "ҷаҳишҳо" дар OKR/SLA.
Ҳисоботҳо дар Excel маҳаллӣ ҳамчун "ҳақиқӣ" (репродуктивӣ).
Омезиши минтақаҳои вақт ва тақвимҳо дар ҳисобҳои SLA.
Истисноҳои SLA ҳуҷҷатгузорӣ карда намешаванд.
Дар бораи сифати андозагирӣ ҳушдоре нест.

18) Мӯҳлати андозагирии KPI

Drift Rate Online↔DWH (ҳадаф ≤ 2%).
Metrics саломатӣ Uptime.
Формулаи вақт-ислоҳ.
Меъёри баҳсҳои SLA.
Фарогирии SLO/SLA (таносуби роҳҳои интиқодӣ бо SLO/SLA ба таври расмӣ тавсифшуда).

19) Нақшҳо ва масъулиятҳо

Соҳиби метрика/хизматрасонӣ: формула, манбаъ, панели панел, огоҳиҳо.
Мушоҳида/SRE: SSOT/платформа, санҷишҳои формула, огоҳиҳои сифати маълумот.
Маълумот/BI: DWH, таҷдиди гузориш, насл.
Адвокатҳо/менеҷерони шарикӣ: Созишномаҳо ва истисноҳои SLA.
Менеҷери ҳодиса: Атрибутсия ва алоқамандии ҳодисаҳои SLA.

20) Оғози зуд (30 рӯз)

Ҳафтаи 1: Метрикаҳои инвентаризатсия/SLO/SLA ва соҳибон; SSOT таъин кунед.
Ҳафтаи 2: Огоҳиҳои сифати маълумот ва панели "Online vs DWH" -ро дар бар гиред.
Ҳафтаи 3: намунаҳои назоратиро гузаронед, равзанаи p95/p99-ро ҳамоҳанг созед.
Ҳафтаи 4: раванди RFC-ро барои формулаҳо ба расмият дароред, ҳисоботи ҳармоҳаи SLA-ро бо замимаҳо омода кунед.

21) FAQ

Савол: SSOT барои SLA чист?
A: Нигоҳдорӣ бо ҳисобҳои такроршаванда (DWH) ва насли пурра; панелҳои онлайн - барои назорати амалиётӣ, на барои санадҳои ҳуқуқӣ.

Савол: Бо "ду p99s" чӣ гуна бояд муносибат кард?
A: Усули равзана/агрегатсияро дар феҳристи ченакҳо ислоҳ кунед, панелҳоро интиқол диҳед, ҳушдорро ба дрифт илова кунед.

Савол: Корҳои банақшагирифташударо чӣ гуна бояд баррасӣ кард?
Ҷ: Тақвими истисноҳоро нигоҳ доред ва онҳоро аз SLA мувофиқи қоидаҳои шартнома ба таври худкор тарҳ кунед; артефактҳои тасдиқкунандаро нигоҳ доред.