Dolandyryşyň merkezi daşbordy
1) Bellenilmegi we ýörelgeleri
Merkezi dolandyryş daşbordy (mundan beýläk - Merkezi dolandyryş bölümi) - amallarda karar kabul etmek üçin ýeke-täk penjire. Ol telemetriýadan, ITSM-den, CI/CD-den, hyzmatlaryň katalogyndan, iş senenamasyndan we üpjün edijilerden signallary birleşdirip, olary hereket edýän (actionable) widjetlere öwürýär.
Ýörelgeler:- SLO-first: ýokarsynda - maksatly SLO we burn-rate Tier-0/1.
- One-click to action: widgetdan - playbook/runbook ýa-da bilete.
- Bir sözlük: birmeňzeş SEV, statuslar, reňkler we bosagalar.
- Wakalaryň düşündirişleri: ähli grafiklerdäki neşirler/konfigalar/penjireler.
- Rollar we rugsatlar: şahsy çykyşlar (on-call, IC, dolandyryş).
- Pes ses: çeşmeleriň kworumy, penjireler boýunça duplikasiýa we basyş.
2) Rollar we esasy ssenariýalar
On-call (P1/P2): "Nämäniň ýanýandygyna" çalt düşünmek we pleýbugy açmak (≤ 1 basmak).
IC: SEV yglan ediň, war-room-re modeimini işe giriziň, komm täzelenmeleriniň kadence gözegçiligini amala aşyryň.
Release Manager: geýtleri görmek, kanareýalaryň ösüşi, yza gaýdyp gelmek.
Service Owner/Product: Business-SLI (tölegleriň/hasaba almalaryň üstünligi), täsiri.
SRE/Platform: kuwwat, awtoskeýl, anomaliýalar, DR-taýynlyk.
FinOps: $/birlik, artykmaç çykdajylar, býudjet aladalary.
Howpsuzlyk/Kanuny: posture, esasy şahadatnamalar, aýlaw penjireleri, WORM-audit baglanyşyklary.
3) CDU-nyň maglumat arhitekturasy
Ýokarky bölek:- SLO по Tier-0/1 (availability/latency/success) с burn-rate 2-окна.
- SEV-status: işjeň hadysalar we olaryň wagty.
- Relizleriň ýagdaýy: kanareýa/blue-green, işjeň geýtlar.
- Üpjün edijileriň "traffic lights" (PSP/KYC/CDN).
- Hyzmat penjireleri (häzirki/24h), suppression-kart.
- Kuwwaty: CPU/RAM/IO/queue-depth/p95 latency çaklamasy bilen.
- FinOps: $/1k txn, gündelik spend vs býudjet, log-göwrümiň anomaliýalary.
- DataOps: penjireleriň täzeligi, SLA paýlaýynlary, DQ ýalňyşlyklary.
- Howpsuzlyk: şahadatnamalaryň möhleti, syrlaryň aýlawy, möhüm gowşaklyklar (age/SLA).
- Korrelýasiýalar "Release SLO", "Provaýderiň şowsuzlygy/gizlinligi".
- Çalt baglanyşyklar: girişler, söwdalar, biletler, oýunlar, SOP, eskalasiýa matrisi.
4) Widjetler (salgylanma toplumy)
1. SLO & Burn-rate
Häzirki SLI-leri, ýalňyşlyklaryň býudjetiniň maksadyny we çykdajylaryny görkezýär (1h/6h).
Hereket: hyzmatyň zaýalanmagynyň pleýbukyny açmak.
2. Hadysalar (SEV paneli)
Active/Son, Declare/Comms taýmerleri, IC/Comms rollary.
Hereket: war-room, täzelenme şablonyny, IC çek sanawyny açmak.
3. Relizler/Konfigi
Kanareýa 1 → 5 → 25%, baýdaklar, yza gaýdyp gelmek (düwme/SOP baglanyşygy).
Düşündirişler: wersiýa, kommitalar, awtor.
4. Hyzmat penjireleri
Häzirki/geljek, impacted-servisler/sebitler; suppression-maska.
Hereket: habarnamalary utgaşdyrmak, SLO goragçylaryny goşmak.
5. Kuwwat/Awtoskeýl
Sarp ediş çaklamasy (Naive/AR), hotspot-kart, warm-pool.
Hereket: kwota/skeyl düzgünlerini soramak (repo-syýasata PR).
6. FinOps
$/birlik, top "gymmat" soraglar/bloglar, daily burn vs budget.
Hereket: Hasabaty we teklipnamany açmak (log semplingleri, arhiwler).
7. Üpjün edijiler
SLA/PSP/KYC/CDN statusy, marşrutlaryň agramy, taýynlyk.
Hereket: Aragatnaşyk şablonyny hyzmatdaşlara geçirmek.
8. Security
Şahadatnamalar (30d ≤), aýlawlaryň gijikdirilmegi, gowşaklyklar (age), şübheli wakalar.
Hereket: IR-pleýbuk/bilet açmak.
9. DataOps
Penjireleriň täzeligi, geçiş göterimi, paýlaýjynyň şowsuzlygy, DLQ.
Hereket: arka/karantin/rollback transformasiýa.
5) Ýagdaýlar/reňkler/bosagalar (standart)
Green: SLI maksat içinde, burn-rate <1 ×.
Amber: SLI pese gaçýar, burn-rate 1-2 ×, ösüş p95, ýöne workaround bar.
Red: breach ýa-da prognoz burn-out <1h; SEV-1/0 açmak.
Grey: suppression (penjire), telemetriýa ýok (çeşme hatasy).
6) Düşündirişler we korrelýasiýa
/ /penjire/üpjün ediji statuslary SLO-grafalarda görkezilýär.
Belgä basmak → diff, awtor, geýt, "Yza/Folbek/SOP" düwmesi.
Wakada timline ChatOps düşündirişlerinden we hereketlerinden gurlupdyr.
7) Maglumatlaryň çeşmeleri we tassyklanylmagy
Telemetriýa: metrikler/treýsler/loglar bilen trace_id.
ITSM: hadysalar/meseleler/üýtgeşmeler (statuslar/SLA).
CI/CD: neşirler, gollar, artefaktlar, synaglar.
Hyzmatlar katalogy/CMDB: eýeler, SLO, garaşlylyk.
Senenama: Hyzmat penjireleri.
Üpjün edijiler: status-API + el bilen tassyklamalar (aýratyn vitrinada gonmak).
FinOps: billing/tags resurslar, log-göwrümler, egress.
Hil gözegçiligi: kworum, köpeldiji zondlar, täzelik SLA, "dilsiz" çeşmelere aladalar.
8) Görkeziş usullary
War-room: SLO/Incidents/Releases/Comms-taýmer.
Executive (28 gün): MTTR/MTTD/SEV mix, $/bir. tendensiýalary, SLO-adgerens.
On-call: ykjam "gijeki" panel (garaňky re modeim, uly sanlar).
Köp tenant/sebit: service/region/tenant süzgüçleri; presetler.
9) Nawigasiýa we hereketler (one-click)
Düwmeler: '/declare sev1 ', '/freeze', '/rollback ', '/status update', "pleybuky aç".
Drill- -n: SLO → grafik → pre-doldurylan süzgüçli loglar/söwdalar ( , .
Şering: panelleriň bilet/status-sahypasyna snapshot.
10) Howpsuzlyk, elýeterlilik, audit
SSO/OIDC + RBAC/ABAC: rollar we satyn alyşlar (view/action).
JIT/JEA: "howply" hereket diňe wagtlaýyn ýokarlanmak bilen elýeterlidir.
Audit üýtgewsiz: kim näme basdy, haýsy soraglar/toparlar gitdi.
Syr: görkezilmeýär, diňe syr dolandyryjysyna salgylanmalar.
11) CDU-nyň kämillik ölçegleri
Actionability ≥ 90%: basmalar diňe grafiklere däl-de, herekete getirýär.
Wagt-to-First-Action ≤ SEV-1/0 wagtynda DDU-dan 2 minut.
CDU "hakykat çeşmesi" bolan hadysalaryň paýy ≥ 95%.
Freshness widget:% "täze 5 minut" maglumatlary bilen.
Coverage: SLO kartoçkalary we neşirleriň düşündirişleri bolan möhüm hyzmatlaryň% -i.
Zero-blind-spots: "dilsiz" çeşmeleriň hepdede = 0.
12) Çek-listler
Dizaýn
- Rollar we ssenariler beýan edilýär (P1/P2/IC/Exec/FinOps/Security/DataOps).
- Gül sözlügi/SEV/çäkleri ylalaşyldy.
- Kworum we SLA täzelik bilen maglumat çeşmeleri.
- War-room/On-call/Executive.
- ChatOps/ITSM/CI/CD/CMDB integrasiýa meýilnamasy.
Amal
- Widgetlar linterden geçýär (hökmany meýdanlar, owner, bosagalar).
- Hepdede bir gezek - CDU-nyň gowulaşmagy bilen Escalation/Alert Review.
- Wakalaryň snapshotlary AAR/RCA-da ulanylýar.
- Garaňky re modeim/nobatçylyk üçin ykjam preset.
- Çeşmeleriň "dilsizligi" we düşündirişleriň dogrulygy üçin synaglar.
13) Şablonlar (pikirler)
13. 1 Widget kesgitlemesi (YAML)
yaml id: slo-payments title: "SLO: Success of payments (EU)"
owner: team-payments type: slo_burnrate sli:
metric: "biz. payment_success_ratio"
target_pct: 99. 5 burn_rate:
short_window: "1h"
long_window: "6h"
thresholds:
amber: { burn_rate: 1. 2 }
red: { burn_rate: 2. 0 }
actions:
- label: "Open playbook"
link: "rb://payments/slo-degrade"
- label: "Release rollback"
link: "sop://REL-ROLLBACK-01"
annotations:
release: true change: true filters:
region: "eu"
tier: "0"
13. 2 Waka kartoçkasy (JSON)
json
{
"id": "incidents-active",
"type": "incident_board",
"sev": ["SEV-0", "SEV-1", "SEV-2"],
"fields": ["id","sev","service","since","ic","next_comms_at"],
"actions": [{"label":"War-room","cmd":"/declare sev1"}]
}
13. 3 Çykyş bilen baglanyşyk
yaml id: release-canary type: release_progress source: cicd://checkout gates: ["tests","signatures","slo_guardrails"]
canary_steps: [1,5,25]
rollback: "sop://REL-ROLLBACK-01"
annotations: { on_charts: ["slo-latency","slo-success"] }
13. 4 FinOps widget
yaml id: finops-burn type: cost_unit metrics:
- id: "cost_per_1k_txn"
- id: "logs_daily_gib"
alerts:
- when: "cost_per_1k_txn > target1. 2"
action: "open://finops/reco-logs-sampling"
14) Anti-patternler
"Grafikleriň diwary" hereketsiz we pleýbuksyz.
Buýruklar boýunça dürli reňkler/bosagalar → SEV-de bulaşyklyk.
Relizleriň/penjireleriň düşündirişleri ýok - sebäpleriň çylşyrymly baglanyşygy.
Kworumsyz köpeldiji çeşmeler - ýalan Sahypa/ses.
Paneldäki syrlar/açarlar - syzmak howpy.
Haýal render (soraglar/agregasiýalar keselmeýär) - paneller söweşde açylmaýar.
15) Durmuşa geçirmegiň ýol kartasy (4-8 hepde)
1. Ned. 1: rollar boýunça talaplary ýygnamak, statuslar/reňkler sözlügi, üç re modeimiň maketleri.
2. Ned. 2: SLO/Incidents/Releases/Windows birikdirmek, düşündirişler, ChatOps-hereketler.
3. Ned. 3: FinOps/Capacity/Providers/DataOps/Security, Kworum çeşmeleri.
4. Ned. 4: War-room re modeimi, ITSM-de snapshotlar, Tier-0-da pilot.
5. Ned. 5-6: öndürijiligi optimizirlemek, ykjam/on-call preset, widget linteri.
6. Ned. 7-8: kämillik metrikleri, hepdelik syn, awtomatiki teklipler (bloglaryň sempling, kwotalar, folbek).
16) Jemleýji
CDU "owadan grafikler" däl-de, çözgütler paneli: SLO we burn-rate ýokarky, hadysalar/goýberişler/bir kontekstde penjireler, ChatOps we SOP arkaly derrew hereketler, tassyklanan çeşmeler we düşündirişler. Şeýle daşbord MTTA/MTTR-i peseldýär, aragatnaşyklary ýönekeýleşdirýär, FinOps-y goldaýar we ekspluatasiýany aç-açan we öňünden aýdyp boljak edýär.