회로 및 어셈블리의 가시성

1) 작업 및 관찰 객체

• 종단 간 인과 관계 (청구서를 클릭하십시오);
• 예측 가능한 SLO 및 관리 위험;
• 빠른 RCA 및 낮은 MTTR;
• 최소 원격 측정 비용으로 확률 (서명 된 요약, WORM 감사).

2) 관찰 가능성 온톨로지

• '차이나', '노데', '역할' (운영자/스튜디오/psp/kyc/계열사/스트림), '관할권', 'env' (prod/stage/sbx), 'trace', 'spanID', 'routeID', 'campaign', 'tableID', 'apmRouteID'.

• '클릭', '세션 _ 스타트', '등록', 'kyc _ 상태', '예금/철회', 'ftd', 'bet/spin', 'postback _ sent/sended', 'jackpot _ liveness/trike', 'stream _ sli', 'rg _ guardrail _ hit'.

• 메트릭 (RED/USE/Golden Signals), 트랙 (W3C traceparent), 로그 (구조), 이벤트 (비즈니스), RUM/Synthetic (클라이언트/채널), Audit/WORM (변경 불가).

모든 체계는 Schema Registry에서 다양합니다. 시간은 UTC/ISO-8601입니다.

3) 운송 및 상관 관계

OpenTelemetry: 메트릭/로그/스팬을위한 단일 형식; TSDB/핸들러 수출 업체.
W3C 추적 컨텍스트: '추적 가능 '/' 추적 성' 은 리디렉션, API, 웹 후크, 버스를 통해 전달됩니다.
이념성: 중요한 경로 (지불/포스트 백) 의 'Idempotency-Key'.
정확히 한 번 의미: 해시 할아버지/커서 이력, 웹훅 재생 레지스터.
Exemplars: 대기 시간 히스토그램을 빠른 RCA에 대한 특정 'traceID' 와 연관시킵니다.

4) SLI/SLO 모델 및 오류 예산

황금 신호: 대기 시간, 교통, 오류, 채도.
RED: 속도, 오류, 기간.
사용 (인프라): 활용, 포화, 오류.

• 웹 후크: 배송 99 이상. 9%, p95 소 1-2 초.
• 파트너 API: p95 3–0. 5%.
• 이벤트 버스: 지연 p95 λ200-500 ms; 전달 이상 99. 9%.
• 지불/AWS: 프로필 복도의 CR; e2e 인증서
• KYC: 관할 프로필별로 합격률 및 SLA 단계.
• Live/SFU/CNC: e2e 2-3 s, 패킷 손실 9%.
• 대시 보드: 신선도 및 1-5 초; p95 렌더링 5–2. 0 초

오류 예산: 수정 기간 (예: 30 일), 오류 유형 (5xx, 타임 아웃, SLO 위반), 자동 보너스/말루스 규칙 및 정지 버튼.

5) 대시 보드: 레이어와 아티팩트

1. 서비스 그래프 (tsepi ² uzly): 토폴로지, rps/eps, p95/p99, 오류율, 채도, 관할권별 히트 맵 스트림.
2. 비즈니스 흐름: klik → registratsiya → KYC → depozit → FTD → stavka/raund → vyplata; 변환 깔때기 및 속성 창.
3. 결제/KYC: CR × 지오 × 장치, 고장 코드, 대기 시간 단계, 주석이 달린 자동 컷 오버.
4. 콘텐츠/RGS/라이브: 왕복, 오류율, SFU/CNC SLI, 리더 보드 및 잭팟.
5. 포스트 백/기여: 적시성, 논쟁, dedup, 커서 지연.
6. 신뢰 및 위험: 노드 스코어 카드 (SLO/ATTR/RG/SEC), "추적 패킷 당 시간", Tier 예측.

각 패널에는 공식 버전과 변경 로그 링크가 포함되어 있습니다.

6) 경고 및 에스컬레이션

다단계 SLO 경고: 경고 (연소 율 2x), 비판 (연소 율 10x), 후속 조치 (냉각 경로/제한).
컴포지션 트리거: "대기 시간 TP + CR + 지연 지연 지연" → PSP 저하에 대한 의심.
역할 채널: SRE/Payments/KYC/RGS/Marketing/Finance/Legal/RG; 컨텍스트에서는 즉시 'traceID '/' runbook '/stop 버튼을 사용할 수 있습니다.
시끄러운 메트릭에 대한 스누즈/뮤팅 정책이지만 P1 방해는 없습니다.

7) RCA gar-room

추적 패킷 당 SLA: 60-90 s (P1/P2).
RCA 패턴 "비난 없음": 사실 → 가설 → 실험 → → 후속 → 행동을 취합니다.
릴리스 diff (§ 2 이벤트): 사건 창에서 충돌/공식/구성을 자동으로 확인하십시오.
사후 SLO: 탐지, 일시 중지, 롤백, 안정화, 메모 게시 시간.

8) 데이터 품질 및 계보

데이터 품질 SLI: 완전성, 신선도, 독창성 ('eventID'), 통화/로케일의 일관성.
계보: 상점/패널에서 소스 (회로도/버전/소유자) 까지.
오라클: 서명 된 집계 (GGR/NetRev/SLO/RG), 'formula Version', 'hash (입력)', 'kid', 기간.
WORM 감사: 불변의 공식/키/예외/송장 로그.

9) 개인 정보 보호, 관할권 및 보안

제로 트러스트: mSL, 단기 토큰, 출구 허용 목록, 키 회전/JWKS.
PII 최소화: '플레이 에르' 의 토큰 화, 안전 지대에서만 데토 케니 화; 로그/메트릭의 PD 금지.
ABAC/ReBAC/SoD: "참조하고 동의하십시오" 액세스; "중요한 영향을 측정하십시오".
시장을위한 데이터 현지화 및 DPIA/DPA; 퍼지 정책 및 TTL.

10) 원격 측정 및 카디널리티 관리 비용

카디널리티 예산: 레이블 제한 (군/사용자 routeID/campaign-허용).
백분위 수 대신 히스토그램; 선택적 디테일을위한 예.
추적의 적응 형 샘플링: 오류/느린 경로/새 버전의 기본 백분율 + 우선 순위.
연령별 다운 샘플링/롤업 (1 초 → 1m → 5m); RAW 트레일의 저장은 짧고 골재는 더 깁니다.
SLO 우선: 솔루션을 지원하는 것 (SLO/재무/준수) 만 수집하십시오.

11) 경영진과의 통합 (SRE ² 비즈니스)

Guardrails 릴리스 및 캠페인은 SLO/버그 예산과 관련이 있습니다.
지표가 복도를 넘어갈 때 자동 컷 오버 APM/KYC 경로.
RevShare/Limits: SLO/ATTR/RG/SEC의 'Q' 품질 승수는 요금과 할당량에 영향을 미칩니다.
노드 스코어 카드 → 교통 우선 순위 지정 및 조종사 액세스.

12) 반 패턴

공식 지표와 다른 창으로 "많은 진실".
하중에서 이력의 오프셋 페이지 매김 (커서 사용).
로그/패널의 PII; BI로 PD 수출.
Postback Zoo 및 서명되지 않은 웹 후크 → 테이크/홀/분쟁.
'트레이스' 가없는 그래프: 패널이 아름답고 인과 관계가 없습니다.
화상 속도 및 롤 플레잉 경로가없는 폭풍 경보.

N + 1/DR.이없는 SPOF 원격 측정 애그리 게이터

TTL/감사가없는 예외는 끈적 끈적한 오버라이드입니다.

13) 점검표

디자인

• 신호 및 회로의 온톨로지; 버전 및 소유자.
• W3C는 어디에서나 명백합니다. 중요한 경로에 대한 이념성 키.
• SLI/SLO 및 오류 예산; 정지 버튼; 가드 레일.
• 카디널리티, 샘플링, 보존/롤업 정책.
• 개인 정보/PII: 토큰 화, DPA/DPIA, 현지화.
• 역할 기반 경고 및 런북.

시작

• 추적/메트릭/로그에 대한 적합성; 합성 실행.
• 릴리스를위한 카나리아 원격 측정; 전후 비교 패널.
• 전쟁 실 플레이 북; 추적 패키지 당 SLA.

작동

• 주간 노드 스코어 카드; 연소율 보고서.
• 월간 공식 변경 및 SLO/제한 개정.
• 애그리 게이터/타이어/상점의 DR/xaoc 운동.

14) 성숙도 로드맵

v1 (재단): 기본 메트릭 + 로그, 단일 트레이시드, 수동 RCA, 기본 SLO.
v2 (통합): 모든 곳에서 OpenTelemetry, 서비스 그래프, 가드 레일, 오라클 파이프 라인, 롤 플레잉 경고.
v3 (자동화): 예측 저하, 자동 절단 APM/KYC/RGS, 스마트 조정, 'Q' 별 역학 제한.
v4 (네트워크 거버넌스): 체인 간 신호 및 오라클 교환, 공식/SLO DAO 규칙, 투명한 재무부.

15) 성공 지표

품질/위험: MTTR 리스크, MTTD °, 틀림 없음 <X%, 자동 일시 정지/롤백 점유율, 트랙 범위는 95% 이상입니다.
비즈니스: 향상 예측 가능성 CR/FTD/ARPU/LTV, 포스트백의 정확성 및 적시성, 안정성 NetRev.
기술: 복도의 p95 API/webhooks/tires/showcase; 노드 가동 시간/CNC/SFU 9%.
경제: rps/이벤트 당 관찰 비용 (CTO), 예제가있는% 집계, RAW 스토리지 한도.
준수: 0 PD 누출, 성공적인 DPIA/DPA 감사, 100% WORM 로그 가용성.

간단한 요약

가시성은 프로덕션 트러스트 루프입니다. 하나의 온톨로지, 엔드 투 엔드 트레이스, 메트릭 및 이벤트 캐논, SLO 가드 레일 및 데이터 오라클, 기본 개인 정보 보호 및 원격 측정 비용 규율. 이러한 프레임 워크는 체인과 노드를 투명하고 예측 가능하며 입증 가능하며 생태계는 반응 적이며 위험에 강합니다.