גלגול אוטומטי של שחרורים

1) למה אתה צריך הסעה אוטומטית

• מפחית את CFR ו-MTTR;
• מגן על SLO (הצלחה אוטומטית, p99 ”stavka” set, ”טעות-קצב”);
• מונע תקריות ציות (PII/RG/AML).

2) עקרונות

1. Revert הוא תכונה: Rollback מתוכנן עבור עיצוב שחרור.
2. מדיניות-כקוד: סף, חלונות, יוצאים מן הכלל - אימות בצינור.
3. קנרית-ראשון: לשטוף לאורך המדרגות, רולבק - מדרגות מראה.
4. נתונים-בטוחים: נדידה היא הפיכה/תקופתית; הגדרות - ניתנות לגילוי.
5. SLO-Gates: RED SLI/Rails = = Rollback אוטומטי מיידי.
6. הסברים: ציר זמן, דיפוזיות, סיבות ליומן התולעת.
7. אין כפתור יחיד של אבדון: הגבלות, אישורים לפעולות סיכון, SoD.

3) הפעלות אוטומטיות (אותות)

3. 1 טכני SLI/KRI

auth_success_rate טיפה על ידי GEO/PSP/BIN (למשל 10% ב TR 10 min).
שבילי מפתח latency/teasy-rate-rate (הפקדה/פלט/יישוב).
תור lag/DLQ קצב/סערה לנסות מחדש.
שכפול db lag/מטמון להחמיץ גל.

3. 2 אותות עסקיים

deposit_conversion איקס פי על קנרית נגד בקרה.
ליישב צניחה מההתחלה.
דריכות/ירידות (רכות/קשות).

3. 3 אירועים קריטיים

כשל SRM בפעילות A/B (עיוות תנועה).
מפעיל מעקה בטיחות אבטחה/מח "ש.
אי ־ התאמה של מעגלים/תצורה (validator/linter).

4) דפוסי התנהגות ארכיטקטוניים

Canary # Ramp # Full: 5% = 25% = 100% קידום; rollback - בסדר הפוך (100 כפול 25 כפול 0).
Blue-Green: מתג תנועה אטומי בין כחול וירוק, rollback - חזרה מיידית.
דגלי תכונה: מתג הריגה לשינוי התנהגותי (TTL, מעקות בטיחות, SoD).
הגדרה: קידום GitOps/קידום מחדש של הגרסה הקודמת; תצלומי ריצה.

• שני פאזות (חוזה הרחבה),
• הפיך (למטה תסריטים),
• כתב-צל (שדות חדשים נכתבים בשכפול),
• Read-compat (הקוד הישן מבין את התוכנית החדשה).

5) מדיניות-מנוע

• auto _ rollback אם auth_success_rate. טיפה (geo = "TR")> 10% עבור 10M וכיסוי> = 5% "
• auto _ rollback אם bet_settle_p99> SLO1. 25 עבור 15 &fost
• auto _ pause _ flag אם api_error_rate> 1. 5% עבור 5 &fost
• deny _ reform אם slo_red ב-auth _ success, ”frejat _ tat _ p95”
• 'require _ dual _ control אם שינוי. משפיע ב- "PSP _ ROUTING", "PII _ Export'

כל החוקים מבוססים, נבדקים ובוחנים.

6) זרימה מקצה לקצה

1. גלאי הרגרסיה מופעל (מטרי/התראה/תוקף).
2. בדיקת יוצאים מן הכלל (פסגות חג, חלונות מבחן).

7) אינטגרציות

רובוט תקרית: '/שחרור rollback <id> ', צירי זמן אוטומטיים, קישורים ללוחות מחוונים ודיפוסים.
מד API: מוכן SLO נוף ומעקה בטיחות סטטוסים; מופת עבור RCA.
דגלים: '/דגל off <id> ', ניתוח אוטומטי על ידי מעקה בטיחות.
GitOps/Config: '/config rollback <snapshot> '; גלאי סחיפה מאשר את התוצאה.
עמוד מצב: עדכונים ציבוריים אופציונליים (באמצעות CL/policy).

8) יכולת תצפית ושיגור טלמטריה

שחררו לוח מחוונים: הצלחה אוטומטית, קצב שגיאה, p95/p99, התיישבו, PSP GEO/BIN.
לוח מעקה בטיחות: כללים פעילים/מופעלים, חלונות, היסטריזה.
היסטוריית כיסוי:% של קנריות/דגלים/אזורים לאורך זמן.
ביקורת: מי/מה/מתי/למה; דיפוזיה של חפצים; גרסת מדיניות; תוצאה.

9) ביטחון, ממון וציות

4-eyes/JIT לפעילויות המשפיעות על תשלומים/PII/RG.
גלגולים המשפיעים על דרישות הרגולציה מיושמים באופן מקומי.
יומני תולעת: עקבות בלתי ניתנות לשינוי לבדיקות.
חבילות תקשורת ציבוריות: עקביות עם CL/Legal; פרטי הניסויים לא נחשפו מבחוץ.

10) דוגמאות של חפצים

10. 1 מדיניות החלפה אוטומטית (YAML)

yaml apiVersion: policy.platform/v1 kind: AutoRollbackRule metadata:
id: "payments-auth-success-tr"
spec:
scope: { tenants: ["brandA","brandB"], regions: ["EU"], geo: ["TR"] }
signal:
metric: "auth_success_rate"
condition: "drop > 10% for 10m"
compareTo: "canary_control"
action:
strategy: "step_down"  # 100%->25%->5%->0%
cooldown: "15m"
exceptions:
calendar: ["2025-11-29:black_friday"]
manualOverride: false audit:
owner: "Payments SO"
riskClass: "high"

10. 2 הגדרות רנטסט rollback

yaml apiVersion: cfg.platform/v1 kind: ConfigRollback metadata:
id: "psp-routing-revert-2025-11-01"
spec:
from: "payments-routing-2025-11-01"
to:  "payments-routing-2025-10-29"
criteria:
- metric: "auth_success_rate"
where: "geo=TR"
condition: "drop>10% for 10m"
notify:
incidentBot: true stakeholders: ["Payments","SRE","Support"]

10. 3 דגל מתג ההריגה

yaml apiVersion: flag.platform/v1 kind: KillSwitch metadata:
id: "deposit.flow.v3"
spec:
guardrails: ["api_error_rate<1.5%","latency_p99<2s","slo_green:auth_success"]
autoPauseOnBreach: true ttl: "30d"

11) עבודה עם נדידת נתונים

• התרחב: הוסף טורים/אינדקסים חדשים מבלי לשבור את הקריאה.
• היגרו: כניסה כפולה/שידור חוזר, בדיקת עקביות.
• חוזה: מחק את החלון הישן רק לאחר שחרור מוצלח + תצפית.
• למטה תסריטים: נדרש; הערכה של זמן ומנעולים.
• צל קורא: השוואה של התוצאות של הנתיב הישן/חדש (ללא תופעות לוואי).
• חוזה קריטריונים ביטול: כל מעקה בטיחות ”אדום”.

12) תהליכים ו ־ RACI

מנהל שחרור: בעל צינור ומדיניות.
בעל השירות: מאשר את כללי התחום, מקבל את הסיכון.
גלאי יישום, מכניקת פולק, לוחות מחוונים.
אבטחה/ציות: SoD, PII/RG control, ביקורת.
בכוננות IC/CL: תקשורת, סטטוס דף.
סקירה שלאחר מעשה של גלגולים אוטומטיים, התאמות כללים.

13) פונקציות KPI/KRI

Rollback Rate: הפרופורציה של שחרור שחוזר אוטומטית (נורמה: נמוך, אבל לא אפס).
Time-to-Rollback: detekt # otkat (median/p95).
מקרים בהם נסיגה אוטומטית מנעה פריצה של מטרות.
False Positives: הפרופורציה של גלגיליות ”כוזבות”.
CFR לפני/אחרי יישום של rollback אוטומטי.
עלות של רולבקס: זמן נוסף, קנריות, משאבי מחשוב.
ביקורת השלמות:% אירועים עם ציר זמן מלא ודיפוזיות.

14) מימוש מפת דרכים (שבועות 6-10)

נד. 1-2: קטלוג של מדדים קריטיים וסף בסיסי; בחירה של אסטרטגיות (כנרית/כחול ירוק/דגלים); ספירת המלאי של ההפיכות.
נד. 3-4: יישום גלאים ומנוע מדיניות; אינטגרציה עם רובוט-תקרית; GitOps-rollback עבור תצורות; מעקות בטיחות של לוחות מחוונים.
נד. 5-6: פיילוט על תחום התשלומים (הצלחה אוטומטית, ניתוב PSP), אימוני שולחן; יומן תולעת ודיווחים.
נד. 7-8: הרחבת המשחקים/KYC; הפסקת דגל אוטומטית; תרגילי ד "ר עם כחול-ירוק.
נד. 9-10: כיול סף, הפחתה חיובית שגויה, הערכת עלות FinOps, RACI ופורמליזציה למידה.

15) תרופות אנטי ־ פטריות

”רול בחזרה איכשהו”: היעדר תוכנית והפיכות של נדידה.
הפעלה מידית גלובלית/ניתוק ללא צעדים.
מדדים גולמיים מתגלגלים ללא הקשר (לא GEO/PSP/BIN stratification).
מתעלם מסר "מ ומציץ בניסויים.
שחרור התראות ללא היסטרזיס * rollback נפנוף.
עריכה ידנית של הגדרות במוצר ללא Git/Audit.
מוחק את התרשימים הישנים לפני שעובר את חלון התצפית.

תוצאות

rollback שחרור אוטומטי היא רשת ההגנה של הפלטפורמה: מדיניות כקוד, אותות וסף נבחרים נכון, פתרונות ארכיטקטוניים הפיכים (כנרית/כחול ירוק/דגלים/הגירה הפיכה), תקשורת מובנית וביקורת מלאה. לולאה זו מפחיתה באופן דרמטי את הסיכון לשחרור, מגינה על ה-SLO וההכנסות ומגדילה את אמונם של הרגולטורים והשותפים.