Панели назорати марказӣ
1) Мақсад ва принсипҳо
Панели назоратии марказӣ (минбаъд CDU номида мешавад) равзанаи ягона барои қабули қарорҳо дар амалиёт мебошад. Он сигналҳоро аз телеметрия, ITSM, CI/CD, каталоги хидматҳо, тақвими корӣ ва провайдерҳо муттаҳид мекунад ва онҳоро ба виджетҳои фаъол табдил медиҳад.
Принсипҳо:- SLO-аввал: боло - ҳадафи SLO ва сатҳи сӯзондан аз ҷониби Tier-0/1.
- Як клик ба амал: аз виҷет - ба дафтарчаи бозӣ/китобча ё чипта.
- Луғати ягона: ҳамон SEV, статусҳо, рангҳо ва ҳудудҳо.
- Эзоҳҳои ҳодиса: релизҳо/конфигуратсияҳо/тирезаҳо дар ҳамаи графикҳо.
- Нақшҳо ва иҷозатҳо: назари шахсӣ (ҳангоми занг, IC, идоракунӣ).
- Ғавғои паст - кворум манбаъ, дефликатсия ва шамол.
2) Нақшҳо ва сенарияҳои асосӣ
Ҳангоми занг (P1/P2): зуд "чӣ ҳаст" -ро бифаҳмед ва дафтарчаи бозиро кушоед (≤ 1 клик).
IC: SEV-ро эълон кунед, режими ҳуҷраҳои ҷангиро оғоз кунед, қобилияти назоратии com-updates.
Менеҷери озодкунӣ: ба дарвозаҳо, пешрафти канарӣ, омодагии бозгашт нигаред.
Соҳиби хидмат/Маҳсулот: бизнес SLI (муваффақияти пардохтҳо/бақайдгирӣ), таъсири хусусиятҳо.
SRE/Платформа: қобилият, автоскале, аномалия, омодагии DR.
Финҳо: $/воҳид, барзиёд пардохт кардан, огоҳиҳои буҷа.
Амният/Ҳуқуқӣ: ҳолат, шаҳодатномаҳои калидӣ, тирезаҳои гардиш, пайвандҳои аудити WORM.
3) Меъмории Иттилоотии CDA
Рафти боло (панели қаҳрамон):- SLO po Tier-0/1 (мавҷудият/ниҳонӣ/муваффақият) s сӯхтан-дараҷаи 2-окна.
- Вазъи SEV: ҳодисаҳои фаъол ва ҷадвали онҳо.
- Ҳолати баромад: дарвозаҳои канарӣ/кабуд-сабз, дарвозаҳои фаъол.
- Таъминкунандагони чароғҳои светофор (PSP/KYC/CDN).
- Тирезаҳои нигоҳдорӣ (ҳоло/24 соат), корти фурӯзон.
- Иқтидор: CPU/RAM/IO/queue-depth/p95 таъхир бо дурнамо.
- Финҳо: $/1k txn, хароҷоти ҳаррӯза бар зидди буҷа, аномалияҳои ҳаҷми сабти ном.
- Маълумот: тару тозаи намоишҳо, қубурҳои SLA, хатогиҳои DQ.
- Амният: мӯҳлати шаҳодатнома, гардиши махфӣ, осебпазирии муҳим (синну сол/SLA).
- Коррелятсияҳо "озод ↔ SLO", "провайдер ↔ нокомӣ/таъхир".
- Истинодҳои зуд: гузоришҳо, роҳҳо, чиптаҳо, дафтарҳои бозӣ, SOP, матритсаи шиддат.
4) Виджетҳо (маҷмӯи истинод)
1. SLO & Сатҳи сабт
SLI, ҳадаф ва хатогии ҷории буҷетро нишон медиҳад (1h/6h).
Амал: кушодани дафтарчаи таназзули хидмат.
2. Ҳодисаҳо (панели SEV)
Нақшҳои фаъол/охирин, эълон/Comms Timers, нақшҳои IC/Comms.
Амал: ҳуҷраи ҷангии кушод, қолаби навсозӣ, рӯйхати IC.
3. Релизҳо/конфигуратсияҳо
Canary 1 → 5 → 25%, парчамҳо, гардиш (тугма/пайванди SOP).
Эзоҳҳо: версия, супоришҳо, муаллиф.
4. Тирезаҳои нигоҳдорӣ
Ҷорӣ/дарпешистода, таъсиррасон-хидматҳо/минтақаҳо; ниқоби фурӯзон.
Амал: Огоҳиномаҳоро ҳамоҳанг созед, посбонони SLO-ро фаъол созед.
5. Иқтидор/Autoscale
Пешгӯии истеъмол (Naive/AR), hotspot-card, ҳавзи гарм.
Амал: квотаҳо/қоидаҳои миқёсро дархост кунед (PR ба сиёсати репо).
6. Финопҳо
$/воҳид, дархостҳо/гузоришҳои "гаронбаҳо" -и болоӣ, сӯхтани ҳаррӯза ва буҷа.
Амал: ҳисобот ва тавсияро кушоед (гузоришҳои интихобӣ, бойгонӣ).
7. Таъминкунандагон
Ҳолати SLA/PSP/KYC/CDN, вазни масир, омодагии бозгашт.
Амал: гузариш вазн, қолаби иртибот ба шарикон.
8. Амният
Шаҳодатномаҳо (≤ 30d), таъхир дар гардиш, осебпазирӣ (синну сол), рӯйдодҳои шубҳанок.
Амал: китоби кушодани IR/чипта.
9. Иттилооти Ops
Тозагии тиреза, фоизи гузариш, нокомии қубур, DLQ.
Амал: Трансформатсияи Backfill/карантин/бозгашт.
5) Давлатҳо/рангҳо/ҳудудҳо (истинод)
Сабз: SLI дар доираи ҳадаф, сӯзондан <1 ×.
Amber: SLI таназзул меёбад, суръати сӯхтан 1-2 ×, афзоиши p95, аммо роҳи мушкиле ҳаст.
Сурх: вайронкунӣ ё пешгӯии сӯзондан <1h; SEV-1/0 кушода.
Хокистарӣ: фурӯзон, телеметрия (хатои манбаъ).
6) Эзоҳҳо ва робитаҳо
Ҳолати озодкунӣ/конфигуратсия/тиреза/провайдер дар графикаи SLO нишон дода мешавад.
Тугмаи § diff, муаллиф, дарвозаҳо, тугмаи Rollback/Folback/SOP -ро клик кунед.
Дар ин ҳодиса, ҷадвал аз эзоҳҳо ва амалҳои Chat-Ops сохта шудааст.
7) Манбаъҳои маълумот ва санҷиш
Телеметрия: ченакҳо/роҳҳо/гузоришҳо бо trace_id.
ITSM: Ҳодисаҳо/Масъалаҳо/Тағирот (Статусҳо/SLA-ҳо).
CI/CD: релизҳо, имзоҳо, артефактҳо, озмоишҳо.
Феҳристи хидматҳо/CMDB: соҳибон, SLO, вобастагӣ.
Тақвим: тирезаҳои нигоҳдорӣ.
Таъминкунандагон: тасдиқи дастӣ-API + (фуруд дар намоишгоҳи алоҳида).
FIN Ops: барчаспҳои биллинг/захираҳо, ҳаҷми вуруд, egress.
Назорати сифат: кворум, зондҳои такрорӣ, тару тозаи SLA, огоҳӣ ба манбаъҳои "гунг".
8) Модулҳои намоиш
Ҳуҷраи ҷангӣ: тарҳбандии собит SLO/Ҳодисаҳо/Релизҳо/Comms-timer.
Иҷроия (28 рӯз): тамоюлҳои омехтаи MTTR/MTTD/SEV, $/воҳиди, риояи SLO.
Занг: панели паймонаи "шаб" (ҳолати торик, шумораи зиёд).
Бисёр иҷорагир/минтақа: филтрҳои хидматрасонӣ/минтақавӣ/иҷорагир; пешакӣ.
9) Навигатсия ва амалҳо (як клик)
Тугмаҳо: '/эълони sev1 ', '/ях кардан', '/бозгашт ', '/навсозии вазъ', 'китоби бози кушода'.
Пармакунӣ: SLO → графика → гузоришҳо/роҳҳо бо филтрҳои пешакӣ (trace_id, release_id)).
Мубодила: тасвири панелҳо дар саҳифаи чипта/ҳолат.
10) Амният, дастрасӣ, аудит
SSO/OIDC + RBAC/ABAC: нақшҳо ва миқёс (манзара/амал).
JIT/JEA: Амали "хатарнок" танҳо бо афзоиши муваққатӣ дастрас аст.
Аудит бетағйир: кӣ фишор овард, ки кадом дархостҳо/фармонҳо боқӣ мондаанд.
Асрҳо: намоиш дода намешаванд, танҳо пайвандҳо ба мудири махфӣ.
11) Нишондиҳандаҳои камолоти CDU
Амал ≥ 90%: Кликҳо ба амалҳо оварда мерасонанд, на танҳо графикҳо.
Вақт аз аввал-Амал ≤ 2 дақиқа аз CCD дар давоми SEV-1/0.
Таносуби ҳодисаҳое, ки CDU "манбаи ҳақиқат" буд ≥ 95%.
Тозагии виджетҳо:% бо маълумоти "5 дақиқа тоза".
Фарогирӣ:% хидматҳои муҳим бо кортҳои SLO ва эзоҳҳо.
Нуқтаҳои сифр-нобино: манбаъҳои хомӯш барои ҳафта = 0.
12) Рӯйхати санҷишҳо
Тарроҳӣ
- Нақшҳо ва скриптҳо тавсиф карда мешаванд (P1/P2/IC/Exec/Fin
- Луғати ранг/SEV/ҳадди ниҳоӣ мувофиқ аст.
- Манбаъҳои маълумот бо кворум ва SLA-ҳои тару тоза.
- Тарҳҳои War-room/On-call/Тарҳҳои иҷроия.
- Нақшаи ҳамгироии Chat-Ops/ITSM/CI/CD/CMDB.
Амалиёт
- Видгетҳо линтерро мегузаранд (майдонҳои зарурӣ, соҳиб, ҳудуд).
- Дар як ҳафта як маротиба - Шарҳи Escalation/Alert бо такмилдиҳии DPC.
- Аксҳои ҳодиса ба AAR/RCA замима карда мешаванд.
- Ҳолати торик/Preset Duty Mobile.
- Санҷишҳо барои манбаъҳои "гунг" ва дурустии эзоҳҳо.
13) Қолабҳо (ғояҳо)
13. 1 Таърифи васеъкунӣ (YAML)
yaml id: slo-payments title: "SLO: Success of payments (EU)"
owner: team-payments type: slo_burnrate sli:
metric: "biz. payment_success_ratio"
target_pct: 99. 5 burn_rate:
short_window: "1h"
long_window: "6h"
thresholds:
amber: { burn_rate: 1. 2 }
red: { burn_rate: 2. 0 }
actions:
- label: "Open playbook"
link: "rb://payments/slo-degrade"
- label: "Release rollback"
link: "sop://REL-ROLLBACK-01"
annotations:
release: true change: true filters:
region: "eu"
tier: "0"
13. 2 Корти ҳодиса (JSON)
json
{
"id": "incidents-active",
"type": "incident_board",
"sev": ["SEV-0", "SEV-1", "SEV-2"],
"fields": ["id","sev","service","since","ic","next_comms_at"],
"actions": [{"label":"War-room","cmd":"/declare sev1"}]
}
13. 3 Пайвастшавӣ бо озодкунӣ
yaml id: release-canary type: release_progress source: cicd://checkout gates: ["tests","signatures","slo_guardrails"]
canary_steps: [1,5,25]
rollback: "sop://REL-ROLLBACK-01"
annotations: { on_charts: ["slo-latency","slo-success"] }
13. 4 Васеъгардонии FIN
yaml id: finops-burn type: cost_unit metrics:
- id: "cost_per_1k_txn"
- id: "logs_daily_gib"
alerts:
- when: "cost_per_1k_txn > target1. 2"
action: "open://finops/reco-logs-sampling"
14) Анти-намунаҳо
"Девори графикҳо" бидуни амал ва дафтарҳои бозӣ.
Рангҳо/ҳудудҳои гуногун дар фармонҳо → нофаҳмиҳо дар SEV.
Тавзеҳоти озод/тиреза вуҷуд надорад - таносуби сабабҳои мураккаб.
Манбаъҳои такрорӣ бе кворум дурӯғ Саҳифа/ғавғо аст.
Асрҳо/калидҳо дар панел - хатари ихроҷ.
Иҷрои оҳиста (дархостҳо/агрегатҳо кэш карда намешаванд) - панелҳо дар ҷанг кушода намешаванд.
15) Харитаи роҳсозӣ (4-8 ҳафта)
1. Нед. 1: ҷамъоварии талабот аз рӯи нақшҳо, луғати статусҳо/рангҳо, тарҳҳои се режим.
2. Нед. 2: SLO/Ҳодисаҳо/Релизҳо/Пайвасти Windows, эзоҳҳо, амалҳои Chatops.
3. Нед. 3: Илова кардани Finops/Иқтидор/Провайдерҳо/Маълумотҳо/Амният, Кворум манбаъҳо.
4. Нед. 4: Ҳолати ҳуҷраҳои ҷангӣ, лаҳзаҳо дар ITSM, пилот дар Tier-0.
5. Нед. 5-6: оптимизатсияи фаъолият, пешнамоиши мобилӣ/занг, виҷет линтер.
6. Нед. 7-8: ченакҳои камолот, баррасии ҳарҳафтаина, тавсияҳои автоматӣ (гузоришҳои интихоб, квотаҳо, ҳисобҳо).
16) Сатри поён
CDU-ҳо "графикҳои зебо" нестанд, балки як қатор қарорҳо мебошанд: SLO ва сатҳи сӯзондан аз боло, ҳодисаҳо/релизҳо/тирезаҳо дар як контекст, амалҳои фаврӣ тавассути Chatops ва SOP, манбаъҳои тасдиқшуда ва эзоҳҳо. Ин панели MTTA/MTTR-ро коҳиш медиҳад, алоқаро содда мекунад, FIN-ро дастгирӣ мекунад ва амалиётро шаффоф ва пешгӯишаванда месозад.