Нишондиҳандаҳои ҳодиса

1) Чаро ҳодисаҳоро чен кунед

Нишондиҳандаҳои ҳодиса рӯйдодҳои хаотикиро ба раванди идорашаванда табдил медиҳанд: ба кам кардани вақти вокуниш ва барқароршавӣ, кам кардани такрори сабаб, исботи иҷрои SLO/шартнома ва ёфтани нуқтаҳои автоматизатсия кӯмак мекунад. Маҷмӯи хуби ченакҳо тамоми давраро дар бар мегирад: муайянкунӣ → таснифот → афзоиш → амалҳои сабуккунанда → барқароркунӣ → таҳлили CAPA →.

2) Таърифҳо ва формулаҳои асосӣ

Фосилаҳои ҳодиса

MTTD (Вақти миёна барои муайян кардан) = вақти миёна аз T0 (фарорасии воқеии таъсир) то сигнал/муайянкунии аввал.
MTTA (Вақти миёна барои эътироф) = вақти миёна аз сигнали аввал то ack on-call.
MTTM (Вақти миёна барои сабук кардан) = вақти миёна барои коҳиш додани ҳадди аққали SLO (аксар вақт = вақт ба ҳолати UX/таназзул).
MTTR (Вақти миёнаи барқароршавӣ) = вақти миёна барои пурра барқарор кардани SLI-ҳои мақсаднок.
MTBF (Вақти миёнаи байни камбудиҳо) = фосилаи миёнаи байни ҳодисаҳои дахлдор.

Вақти корӣ

Вақт барои эълон - аз T0 то эълони расмии сатҳи SEV/ҳодиса.
Вақт ба Comms - аз эълон то аввалин навсозии ҷамъиятӣ/дохилии SLA.
Вақт дар давлат - давомнокӣ дар ҳар як марҳила (triage/diag/fix/verify).

Басомад ва каср

Ҳисоби ҳодисаҳо - шумораи ҳодисаҳо дар як давра.
Меъёри ҳодисаҳо - дар амалиётҳо ё дархостҳои бомуваффақияти 1k/10k/100k (нормализатсия).
SEV Mix - тақсимот аз рӯи вазнинӣ (SEV-0... SEV-3).
Ҳисоб/Меъёри вайронкунии SLA - рақам/ҳиссаи вайронкунии SLA-ҳои беруна.
Тағйир додани сатҳи нокомӣ -% ҳодисаҳое, ки бо тағирот ба вуҷуд омадаанд (релизҳо/конфигуратсияҳо/муҳоҷират).

Сифати сигналҳо ва равандҳо

% Саҳифаҳои амалкунанда - таносуби саҳифаҳое, ки ба амалҳои пурмазмуни китоби бозӣ оварда расонданд.
Меъёри мусбати бардурӯғ (Саҳифаҳо) - таносуби мусбатҳои бардурӯғ.
Фарогирии муайянкунӣ - таносуби ҳодисаҳое, ки тавассути автоматизатсия муайян карда мешаванд (на мизоҷон/дастгирӣ).
Меъёри боз кардан - таносуби ҳодисаҳои такрорӣ бо ҳамон реша 90 рӯзро ташкил медиҳад.
Анҷоми CAPA -% амалҳои ислоҳӣ/пешгирикунанда сари вақт баста мешаванд.
Comms SLA Adherence - таносуби навсозиҳои бо басомади зарурӣ нашршуда.

3) Харитаи ченакҳо аз рӯи марҳилаи ҳодиса

4) Нормализатсия ва сегментатсия

Ҳисобкунакҳоро ба ҳаҷм муқаррар кунед (трафик, муваффақият, истифодабарандагони фаъол).
Сегмент аз рӯи: минтақа/иҷорагир, провайдер (PSP/KYC/CDN), навъи тағирот (рамз/конфиг/инфра), вақти рӯз (рӯз/шаб), манбаи муайянкунӣ (синтетикӣ/RUM/infra/дастгирӣ).
SLI-ҳои тиҷорӣ (муваффақияти пардохтҳо, бақайдгирӣ, пуркунӣ) барои тиҷорат муҳиманд - нишондиҳандаҳои ҳодисаҳо бо таназзули онҳо.

5) Ҳадафҳои ҳадди ниҳоӣ (нишонаҳо, мутобиқ шудан ба домен)

MTTD: 5 дақиқа барои , 10-15 дақиқа барои Tier-1.
MTTA: ≤ 5 дақиқа (24/7), ≤ 10 дақиқа (пас аз офтоб).
MTTM: ≤ 15 дақиқа (Сатҳи 0), ≤ 30-60 дақиқа (Сатҳи-1).
MTTR: ≤ 60 дақиқа (Tier-0), ≤ 4 h (Tier-1).
Фарогирии муайянкунӣ: ≥ 85% автоматизатсия.
% Саҳифаҳои фаъол: ≥ 80-90%; Саҳифаҳои FP: ≤ 5%.
Меъёри бозсозӣ (90д): ≤ 5-10%.
Анҷоми CAPA (сари вақт): ≥ 85%.

6) Атрибутсияи сабабҳо ва таъсири тағирот

Сабаби асосиро таъин кунед (Code/Config/Infra/провайдер/Амният/Маълумот/Қобилият) ва триггер (озод кардани ID, тағир додани конфигуратсия, муҳоҷират, омили беруна) ба ҳар як ҳодиса.
MTTR/Count-ро бо тағирот нигоҳ доред - чӣ қадар релизҳо ва конфигуратсияҳо саҳм мегузоранд (пойгоҳ барои сиёсати дарвоза/канарӣ).
Алоҳида, ҳодисаҳои ба провайдер асосёфтаро (PSP/KYC/CDN/Cloud) барои идоракунии хатсайрҳо ва шартномаҳо баррасӣ кунед.

7) Робита ва таъсири муштариён

Вақт барои навсозии оммавӣ ва навсозии кадрӣ (масалан, ҳар 15/30 дақиқа).
Меъёри шикоят - чиптаҳо/шикоятҳо дар бораи 1 ҳодиса, тамоюл.
Дақиқии вазъ - ҳиссаи навсозиҳои ҷамъиятӣ бидуни бозхонд.
NPS-и пас аз ҳодиса (аз ҷониби фармоишгари асосӣ) - такмили кӯтоҳ пас аз SEV-1/0.

8) Огоҳ кардани ченакҳои сифат дар атрофи ҳодисаҳо

Индекси тӯфони саҳифа - шумораи саҳифаҳо/соат дар як занг ҳангоми ҳодиса (median/p95).
Самаранокии Dedup - ҳиссаи нусхаҳои фишурдашуда.
Меъёри тасдиқи кворум - таносуби ҳодисаҳое, ки дар он кворум пробҳо (≥ 2 манбаи мустақил) ба вуҷуд омадаанд.
Shadow → Canary → Табдили қоидаҳои нав (Alert-as-Code).

9) Панели панелҳо (маҷмӯи ҳадди аққал)

1. Иҷроия (28 рӯз): шумораи ҳодисаҳо, тақсимоти SEV, MTTR/MTTM, танаффусҳои SLA, Reopen, CAPA.
2. Амалиётҳои SRE: MTTD/MTTA po chasam/smenam, Storm Page, Actionable%, Фарогирии муайянкунӣ, Вақти эълон/Comms.
3. Таъсири тағирот: ҳиссаи ҳодисаҳои озодкунӣ/конфигуратсия, MTTR барои ҳодисаҳои тағирот, тирезаҳои нигоҳдорӣ ва ҳодисаҳо.
4. Таъминкунандагон: ҳодисаҳо аз ҷониби провайдер, вақти таназзул, коммутаторҳои масир, шартномаҳои SLA.
5. Харитаи гармидиҳӣ аз рӯи хидмат/минтақа: Ҳодисаҳо ва MTTR барои 1 амалиёт.

Якҷоя кардани графикаи SLI/SLO бо эзоҳҳо ва аломатҳои SEV.

10) Диаграммаи маълумот дар бораи ҳодисаҳо (тавсия)

incident_id, sev, state, service, region, tenant, provider?,
t0_actual, t_detected, t_ack, t_declared, t_mitigated, t_recovered,
source_detect (synthetic    rum    infra    support),
root_cause (code    config    infra    provider    security    data    capacity    other),
trigger_id (release_id    change_id    external_id),
slo_impact (availability    latency    success), burn_minutes,
sla_breach (bool), public_updates[], owners (IC/TL/Comms/Scribe),
postmortem_id, capa_ids[], reopened_within_90d (bool)

11) Намунаҳои ҳисоб (идеяи SQL)

sql
SELECT PERCENTILE_CONT(0.5) WITHIN GROUP (ORDER BY EXTRACT(EPOCH FROM (t_recovered - t0_actual))/60) AS mttr_min
FROM incidents
WHERE t0_actual >= '2025-10-01' AND t_recovered IS NOT NULL AND sev IN ('SEV-0','SEV-1','SEV-2');

sql
SELECT 100.0 SUM(CASE WHEN source_detect <> 'support' THEN 1 ELSE 0 END) / COUNT() AS detection_coverage_pct
FROM incidents
WHERE t0_actual >= current_date - INTERVAL '28 days';

sql
SELECT 100.0 COUNT() FILTER (WHERE trigger_id IS NOT NULL) / NULLIF(COUNT(),0) AS change_failure_rate_pct
FROM incidents
WHERE t0_actual >= current_date - INTERVAL '28 days';

12) Истинод ба SLO ва буҷаҳои хатогӣ

Дақиқаҳои сӯхтани SLO-ро дар як ҳодиса сабт кунед - ин "вазни" асосии ҳодиса аст.
CAPA-ро аз рӯи вазни умумии сӯхтан ва вазни SEV афзалият диҳед, на аз ҳисоби ҳодисаҳо.
Сӯзонданро бо таъсири молиявӣ якҷоя кунед (масалан: $/дақиқаи вақти корӣ ё муомилоти $/гумшуда).

13) Нишондиҳандаҳои сатҳи барномавӣ

Вақти пешбари Постмортем: Медиан аз бастани ҳодиса то нашри гузориш.
Пуррагии далелҳо: ҳиссаи ҳисоботҳо бо ҷадвал, диаграммаҳои SLI, гузоришҳо, пайвандҳо ба PR/comms.
Нишондиҳандаи гигиенаи ҳушдор: индекси таркибӣ аз рӯи фаъол/FP/dedup/кворум.
Камбудиҳои таҳвил: таносуби тағирот, ки дар он контексти ҳодисаҳои фаъол гум мешаванд.
Фарогирии омӯзишӣ:% занг дар семоҳа шабоҳат дорад.

14) Рӯйхати санҷиши иҷрои ченакҳо

• Мӯҳлатҳои ягонаи вақт (UTC) ва шартномаи ҳодиса муайян карда мешаванд.
• SEV, решаи таксономия ва манбаъҳои муайянкунии қабулшуда.
• Нишондиҳандаҳо ба ҳаҷм (трафик/муваффақият) муқаррар карда мешаванд.
• 3 панели тайёр: иҷроия, амалиёт, таъсири тағирот.
• Ҳушдор-ас-Кодекс: Ҳар як қоидаи саҳифа дорои дафтарчаи бозӣ ва соҳиби он мебошад.
• SLA пас аз марг (масалан, лоиҳаи ≤ 72ch, ниҳоӣ ≤ 5 ғулом. рӯзҳо).
• CAPA бо санаҳои эффекти KPI ва D + 14/D + 30 пайгирӣ карда мешаванд.
• Шарҳи ҳарҳафтаинаи ҳодисаҳо: Тамоюлҳо, сабабҳои асосӣ, вазъи CAPA.

15) Анти-намунаҳо

Танҳо MTTR-ро бе MTTD/MTTA/MTTM → аз даст додани идоракунии марҳилаҳои ибтидоӣ баррасӣ кунед.
На ба эътидол овардани ҳаҷм → хидматҳои калон "ба назар" бадтаранд.
Ҳодисаҳои ғайримуқаррарии SEV →.
Набудани далелҳо → ба ҷои такмилдиҳӣ.
Ба ҷои таъсири сӯхтан/SLO ба шумораи ҳодисаҳо диққат диҳед.
Reopen ва CAPA → такрори абадиро нодида гиред.
Metrics in Excel бе боркунии худкор аз Telemetry/ITSM.

16) Қолабҳои хурд

Корти ҳодиса (abbr.)

INC: 2025-11-01-042 (SEV-1)
T0=12:04Z, Detected=12:07, Ack=12:09, Declared=12:11,
Mitigated=12:24, Recovered=12:48
Service: payments-api (EU)
SLI: success_ratio (-3.6% к SLO, burn=18 мин)
Root cause: provider (PSP-A), Trigger: status red
Comms: first 12:12Z, cadence 15m, SLA met
Links: dashboards, logs, traces, release notes

Ҳисоботи иҷроия (28 рӯз, хатҳои асосӣ)

Incidents: 12 (SEV-0:1, SEV-1:3, SEV-2:6, SEV-3:2)
Median MTTR: 52 мин; Median MTTD: 4 мин; MTTA: 3 мин; MTTM: 17 мин
Detection Coverage: 88%; Actionable Pages: 86%; FP Pages: 3.2%
Change Failure Rate: 33% (4/12) — 3 связаны с конфигом
Reopen(90d): 1/12 (8.3%); CAPA Completion: 82% (2 просрочены)
Top Root Causes: provider(4), config(3), capacity(2)

17) Харитаи роҳ (4-6 ҳафта)

1. Нед. 1-Timestamp/field стандартӣ, намоиши асосии ҳодисаҳои луғати SEV/сабаб.
2. Нед. 2: Ҳисобҳои MTTD/MTTA/MTTM/MTTR, нормализатсия ва панели SEV.
3. Нед. 3: баста бо релизҳо/конфигуратсияҳо, фарогирии муайянкунӣ ва гигиенаи ҳушдор.
4. Нед. 4: Ҳисоботи иҷроия, пас аз қатл SLA, tracker CAPA.
5. Нед. 5-6: гузоришҳои провайдер, сӯзондан → модели молиявӣ, ҳадафҳои семоҳа ва ҳар семоҳаи баррасии ҳодисаҳо.

18) Сатри поён

Нишондиҳандаҳои ҳодисаҳо на танҳо рақамҳо, балки нақшаи эътимоднокии амалиётӣ мебошанд. Вақте ки шумо тамоми ҷараёнро чен мекунед (аз муайянкунӣ то CAPA), ченакҳоро ба эътидол оваред, онҳоро бо SLO ва тағирот пайваст кунед ва мунтазам баррасӣ кунед, ташкилот пешгӯӣ вақт, арзиш ва басомади ҳодисаҳоро коҳиш медиҳад - ва корбарон хидмати устуворро мебинанд.