Таҳлили сабабҳои решавӣ

1) RCA чист ва чаро он лозим аст

Таҳлили сабабҳои решавӣ як раванди сохторӣ барои муайян кардани сабабҳои решаи ҳодиса бо мақсади пешгирии такрорӣ мебошад. Дар марказ - далелҳо, муносибатҳои сабабӣ ва такмилдиҳии системавӣ (равандҳо, меъморӣ, озмоишҳо), на ҷустуҷӯи гуноҳ.
Ҳадафҳо: пешгирии такрорӣ, коҳиш додани сатҳи MTTR/ҳодиса, беҳтар кардани SLO, эҷоди эътимод бо танзимгарон ва шарикон.

2) Принсипҳо (Фарҳанги одилона)

Не пардохт. Мо на одамон, балки амалҳои хатарнокро ҷазо медиҳем.
Факт. Танҳо маълумотҳои тасдиқшаванда ва артефактҳо.
E2E намоиш. Аз муштарӣ то пуштибонӣ ба провайдерҳо.
Озмоиши гипотезаҳо. Ҳама гуна изҳорот - бо озмоиш/озмоиш.
Бастани CAPA. Чораҳои ислоҳӣ ва пешгирикунанда бо соҳибон ва мӯҳлатҳо.

3) Артефактҳо ва омодагӣ

Хати вақти UTC: Муайянкунии T0 → T + амалҳо → барқароркунии T +.
Маълумот дар бораи мушоҳида: гузоришҳо, ченакҳо (аз ҷумла аз ҷониби когорт), роҳҳо, синтетика, саҳифаи вазъ.
Тағирот: релизҳо, парчамҳои хусусият, конфигуратсияҳо, чорабиниҳои провайдер.
Муҳити зист: версияҳо, хэш артефакт, SBOM, барчаспҳои инфрасохтор.
Базаи ҳодисаҳо: тавсифи таъсир (SLO/SLA, муштариён, гардиш), қарорҳои қабулшуда, роҳи мушкил.
Силсилаи ҳабс: кӣ ва ҳангоми ҷамъоварӣ/тағир додани далелҳо (барои мувофиқат муҳим аст).

4) Усулҳои RCA: вақте ки

1. 5 Чаро - зуд занҷири сабабҳоро барои мушкилоти танг муайян кунед. Хавф: системаи мураккабро ба сатр "печонед".
2. Fishbone - Гурӯҳбандӣ кардани омилҳо ҳамчун одамон/раванд/платформа/сиёсат/шарик/маҳсулот. Дар ибтидо муфид аст.
3. Таҳлили дарахтони хато (FTA) - тарҳ аз ҳодиса ба маҷмӯа (ВА/Ё). Барои шикастани инфрасохтор ва дарахтон.
4. Графикаи сабабӣ/занҷираи рӯйдодҳо - графикаи вобастагӣ бо эҳтимолият ва вазни саҳм. Хуб барои microservices ва провайдерҳои беруна.
5. FMEA (Усулҳои нокомӣ ва таҳлили эффектҳо) - Пешгирӣ: режими нокомӣ, вазнинӣ (S), басомад (O), муайянкунӣ (D), RPN = S × O × D.
6. Таҳлили тағирот - муқоиса "чӣ тавре ки шуд/чӣ тавре ки шуд" (config diff, schema, версияҳо).
7. Шарҳи омилҳои инсонӣ - контексти қарорҳои одамон (хастагӣ, китобҳои бад, изофабор).

Комбинатсияи тавсияшаванда: Fishbone → Таҳлили тағирот → Графикаи Causal/FTA → 5 Чаро аз ҷониби шохаҳои асосӣ.

5) Раванди қадам ба қадам RCA

1. Ташаббус: соҳиби RCA таъин кунед, мӯҳлати додани ҳисоботро муайян кунед (масалан, 5 рӯзи корӣ), гурӯҳро ҷамъ кунед (IC, TL, Scribe, намояндагони провайдер).
2. Ҷамъоварии далелҳо: ҷадвал, графикҳо, релизҳо, гузоришҳо, артефактҳо; Версияҳо ва назорати маблағро ислоҳ кунед.
3. Таъсири харита: ба кадом SLI/SLO таъсир расонд, ки онҳо гурӯҳҳо (кишварҳо, провайдерҳо, VIP) мебошанд.
4. Сохтани фарзияҳо: ибтидоӣ, алтернативӣ; санҷед, ки ҳоло санҷида мешаванд.
5. Гипотезаҳои санҷишӣ: бозикунӣ дар саҳна/моделиронӣ/канарӣ, таҳлили пайгирӣ, тазриқи хато.
6. Сабабҳои решавӣ ва саҳмгузорро муайян кунед: технологӣ, раванд, ташкилӣ.
7. Шакли CAPA: ислоҳ (дуруст) ва пешгирикунанда (пешгирӣ); андозагирӣ ва мӯҳлатҳои муваффақият.
8. Ҳисоботро муқоиса ва нашр кунед: пойгоҳи дониши дохилӣ +, агар лозим бошад, версияи беруна барои муштариён/танзимкунанда.
9. Таъсири санҷиш: нуқтаҳои гузаргоҳ пас аз 14/30 рӯз; амалҳои хотимавӣ.

6) Он чизе ки "сабаби решавӣ" ҳисобида мешавад

• санҷишҳои заиф/парчамҳои хусусӣ, маҳдудиятҳои/огоҳиҳои нопурра, ҳуҷҷатҳои номуайян, пешфарзҳои нодуруст, меъмории нозук.
• Аксар вақт ин маҷмӯи омилҳо мебошад (конфигуратсия набудани дарвоза провайдери сарборӣ).

7) CAPA: чораҳои ислоҳӣ ва пешгирикунанда

• рамзи/конфигуратсия, баргардонидани намуна, тағир додани маҳдудиятҳо/таъхирҳо, илова кардани индексатсияҳо, нусхабардорӣ/sharding, тақсимоти трафик, навсозии шаҳодатномаҳо.

• озмоишҳо (шартнома, ҳолатҳои бетартибӣ), огоҳиҳо (сатҳи сӯзондан, кворуми синтетика), сиёсати озодкунӣ (канарӣ/кабуд-сабз), Gitops барои конфигуратсияҳо, омӯзиш/рӯйхатҳои назоратӣ, такрори провайдерҳо, машқҳои DR.

Ҳар як амал: соҳиб, мӯҳлат, эффекти пешбинишуда, метрикаи санҷиш (масалан, паст кардани сатҳи тағирот-нокомӣ то X%, такрори 90 рӯз).

8) Санҷиши фарзияҳо ва эффектҳо

Таҷрибаҳо: тазриқи хато/бетартибӣ, трафики сояҳо, конфигуратсияҳои A/B, сарборӣ бо профилҳои воқеӣ.
Нишондиҳандаҳои муваффақият: Барқарорсозии SLO, мӯътадилсозии p95/p99, хӯшаҳои хатогӣ, коҳиши MTTR, суръати сӯзондан ва тамоюли сифр-бозсозӣ дар тӯли 30 рӯз.
Нуқтаҳои назоратӣ: D + 7, D + 30, D + 90 - таҷдиди назар ва таъсири CAPA.

9) Қолаби ҳисоботи RCA (дохилӣ)

1. Хулосаи кӯтоҳ: вақте ки рух дод, кӣ таъсир кард.
2. Таъсир: SLI/SLO, корбарон, минтақаҳо, гардиш/ҷаримаҳо (агар бошад).
3. Хатти вақт (UTC): рӯйдодҳои асосӣ (огоҳиҳо, қарорҳо, релизҳо, ислоҳҳо).
4. Мушоҳидаҳо ва додаҳо: графикҳо, гузоришҳо, пайҳо, конфигуратсияҳо (диффҳо), ҳолати провайдерҳо.
5. Гипотезаҳо ва озмоишҳо: қабул/рад, истинод ба таҷрибаҳо.
6. Сабабҳои решавӣ: технологӣ, раванд, ташкилӣ.
7. Омилҳои саҳмгузор: "чаро пайхас накарданд/қатъ накарданд".
8. Нақшаи CAPA: ҷадвали амалҳо бо соҳибон/мӯҳлатҳо/ченакҳо.
9. Хатарҳо ва осебпазирии боқимонда: боз чӣ бояд назорат/озмоиш карда шавад.
10. Барномаҳо: артефактҳо, истинодҳо, графикҳо (рӯйхат).

10) Мисол (кӯтоҳ, умумӣ)

Чорабинӣ: муваффақияти пардохт 35% дар 19: 05-19: 26 (SEV-1).
Таъсир: 21 дақиқа e2e-SLO вайроншуда, 3 кишвари зарардида, баргардонидан/ҷубронпулӣ.
Сабаби 1 (онҳое): Нусхаи нави валидатори корт таъхирро ба 1 зиёд кард. 2 s → танаффус ба провайдер.
Сабаби 2 (фоиз): канарейка барои провайдери "А" вуҷуд надошт, озодкунӣ фавран 100% буд.
Сабаби 3 (org): ҳадди ҳушёрӣ дар тиҷорати SLI диапазони мушаххаси BIN (VIP cohort) -ро фаро нагирифт.
CAPA: нусхаи кӯҳнаи валидаторро баргардонед; канараро 1/5/25% ворид кунед; SLI-ҳои тиҷоратиро аз ҷониби гурӯҳҳои BIN илова кунед; дар бораи нокомии 30% барои провайдери "B" розӣ шавед; ҳолати бетартибӣ "оҳиста дар боло".

11) Нишондиҳандаҳои камолоти RCA

Ба итмом расонидани CAPA (% дар 30 рӯз баста мешавад).
Сатҳи бозсозӣ (ҳодисаҳо дар 90 рӯз боз шуданд).
Сатҳи тағирот пеш аз/баъд аз он.
Таносуби ҳодисаҳое, ки сабабҳои системавӣ пайдо мешаванд (на танҳо "хатои инсонӣ").
Фарогирии санҷишҳои сенарияҳои нав аз RCA.
Вақти барориши ҳисобот (нашри SLA).

12) Хусусиятҳои доменҳои танзимшаванда (fintech/IGaming ва ғайра)

Ҳисобот ба берун: версияҳои муштарӣ/танзимкунандаи гузориш бидуни тафсилоти ҳассос, аммо бо нақшаи пешгирии такрорӣ.
Сабти аудит ва тағйирнопазирӣ: нигоҳдории артефактҳо, ҳисоботҳои имзошуда, пайвастшавӣ бо чиптаҳо, CMDB, гузоришҳои озод.
Маълумоти корбар: деперсонализатсия/ниқоб дар гузоришҳои намуна.
Мӯҳлатҳои огоҳӣ: бо шартномаҳо ва қоидаҳо алоқаманд (масалан, N соат дар як огоҳиномаи аввал).

13) Анти-намунаҳо

"Вася айбдор аст" - боздоштани омили инсонӣ бидуни сабабҳои системавӣ.
Набудани санҷишҳои гипотеза - хулосаҳо аз рӯи эҳсосот.
RCA-и умумӣ ("хидмат аз ҳад зиёд бор карда шуд") - тағироти мушаххас вуҷуд надорад.
Не CAPA ё не соҳибон/мӯҳлатҳо - гузориш ба хотири гузориш.
Пинҳон кардани маълумот - гум шудани боварӣ, қобилияти омӯзонидани ташкилот.
Изофабор бо ченакҳои ғайри SLO/business SLI.

14) Воситаҳо ва амалия

Репозиторияи RCA (wiki/пойгоҳи дониш) бо метамаълумот: хидмат, SEV, сабабҳо, CAPA, ҳолат.
Қолибҳо ва ботҳо: тавлиди чаҳорчӯбаи гузориш аз ҳодиса (ҷадвал, графикҳо, релизҳо).
Графикаи сабабӣ: сохтани харитаи ҳодисаҳо (масалан, дар асоси гузоришҳо/пайҳо).
Каталоги хаос: скриптҳо барои таҷдиди ҳодисаҳои гузашта дар саҳна.
Панели панелҳо "пас аз RCA": виджетҳои инфиродӣ, ки таъсири CAPA-ро тасдиқ мекунанд.

15) Рӯйхати назоратӣ "барои нашр омода"

• Вақтҳо ва артефактҳо пурра ва тасдиқ карда мешаванд.
• Сабабҳои решавӣ бо озмоишҳо/таҷрибаҳо муайян ва исбот карда мешаванд.
• Сабабҳои решавӣ ва саҳмгузор ҷудо мешаванд.
• CAPA дорои соҳибон, мӯҳлатҳо, ченакҳои эффектҳои ченшаванда мебошад.
• Дар 14/30 рӯз нақшаи санҷиш мавҷуд аст.
• Версия барои ҷонибҳои манфиатдори беруна омода карда шудааст (агар лозим бошад).
• Ҳисобот аз баррасии техникӣ/фоизӣ гузашт.

16) Сатри поён

RCA барои расмият ретроспективӣ нест, балки механизми омӯзишии система мебошад. Вақте ки далелҳо ҷамъоварӣ мешаванд, сабабҳо исбот мешаванд ва CAPA-ҳо ба ченакҳо баста мешаванд ва аз ҷониби таҷрибаҳо озмуда мешаванд, созмон ҳар дафъа устувортар мегардад: SLO-ҳо устувортаранд, хатари такрорӣ камтар аст ва эътимоди корбар ва танзимкунанда баландтар аст.