التحميل والتنبؤ بالمخاطر

1) لماذا تحتاجه

• تخطيط القدرات والميزنة
• إعدادات SLO/SLI وميزانيات الأخطاء وسياسات التنبيه
• واختيار استراتيجية للإطلاق (كناري، أزرق أخضر، إطلاق مظلم) ؛
• إدارة المخاطر: منع التدهور، وقوائم الانتظار، وإسقاط المعاملات، وغرامات جيش تحرير السودان.

2) المفاهيم الأساسية

معدل الأحداث/العمليات الواردة (RPS، TPS، الأحداث/الثانية) وكذلك استهلاك وحدة المعالجة المركزية/ذاكرة الوصول العشوائي/IO/net.
أداء يمكن تحقيقه باستمرار في SLO معين والتكلفة.
المخاطر: احتمال × تأثير حدث غير مرغوب فيه (فشل جيش تحرير السودان، حادث، إنفاق زائد).
المؤشرات المبكرة: المقاييس التي تنمو قبل الحادث (زمن الكمون p95/p99، عمق قائمة الانتظار، توقف GC، معدل الخطأ، التشبع).
نسبة السعة المتاحة إلى الحمل الحالي.

3) مصادر البيانات والمقاييس

المصادر: السجلات والمقاييس (Prometheus/OTel)، والآثار، والأحداث التجارية (Kafka)، وسجلات CDN/WAF/ALB، وبيانات ماركت التكنولوجيا (الحملات)، وتقويمات الأحداث، والفواتير/العظام (FinOps)، والفقرات/الإصدارات، وقوائم الانتظار (كافكا/أرنب)، DB/المخابئ.

• حركة المرور: RPS/TPS، المستخدمون النشطون (DAU/MAU)، الجلسات، تحويل الخطوة.
• الأداء: زمن الكمون p50/p95/p99، الإنتاجية، الأخطاء (4xx/5xx)، المهلة، الإعادات.
• Ресурсы: وحدة المعالجة المركزية/LoadAvg، ذاكرة الوصول العشوائي/GC، أقراص IOps/lat، شبكة bw، استخدام تجمع الاتصال.
• قوائم الانتظار: تراكم، تأخر، تأخر المستهلك، وقت الانتظار.
• БД: QPS، انتظار القفل، الاستفسارات البطيئة، تأخر النسخ.
• Кэши: نسبة الإصابة، معدل الإخلاء، المفاتيح الساخنة.
• مستوى الأعمال: الودائع/الأسعار في الدقيقة، رفض الدفع، قائمة انتظار KYC/AML.
• الموثوقية: SLI/SLO، معدل حرق ميزانية الخطأ (1 ساعة/6 ساعة/24 ساعة).

4) نماذج التنبؤ الأساسية

1. الحتمية والتقويم: التراجع على السائقين المعروفين (التاريخ/الوقت، المباريات، البطولات، مجمعات السوق، الجغرافيا، زغب الأسهم).
2. الإحصائيات: الموسمية/الاتجاه (ARIMA/ETS)، التراجع مع الأعياد، النهج الشبيهة بالنبي.
3. ML/مجموعات: تعزيز التدرج/الغابة العشوائية/XGBoost/LightGBM ؛ إضافة ميزات: الطقس، سعر الصرف، الأخبار الرياضية، الأحداث المتنافسة.
4. مختلطة: إحصاءات عن موسمية خط الأساس + ML للعوامل الخارجية (الحملات والإطلاقات).
5. الحصص/الكميات: التنبؤ ليس فقط بالمتوسط، ولكن أيضًا p90/p95 للتخطيط الرأسي.

مخرجات النموذج: التنبؤ بتوزيعات RPS/TPS والكمون/الخطأ في آفاق T + 1h/T + 24h/T + 7d/T + 30d مع فترات ثقة.

5) قوائم الانتظار والحدود: نظرية مصغرة

Little's Law: L = λ × W (العدد المتوسط في النظام = الشدة × الوقت المتوسط).
الاختناقات: DB/cache/bus/connection pool/API حدود مزود.
التشبع: عند الحمل> 70-80٪ الكمون يزيد بشكل غير خطي.
الضغط الخلفي: حماية المستهلك من العبء الزائد (الحدود، قوائم الانتظار، سياسات التخلص، تدهور الميزات).

6) تخطيط القدرات

طريقة SLO: الكمون المطلوب p99 ومعدل الخطأ المقبول → حيث يتم الحفاظ على الإنتاجية عند غرفة الرأس N٪.
طريقة «من السيناريوهات»: «مباراة دوري أبطال أوروبا»، «الجمعة السوداء»، «البطولة واسعة النطاق» → الكميات العلوية من حركة المرور + فشل عقدة واحدة.
طريقة «إدراك التكلفة»: اختيار التكوينات حسب الدولار/RPS، مع مراعاة الخصومات والحجوزات والاشتراكات الفورية/الاشتراكات، التوزيع التلقائي.

القطع الأثرية: نموذج السعة لكل خدمة، الحدود والحصص (API، DB، قوائم الانتظار)، عنق الزجاجة → طاولة العمل (الشق، التخزين المؤقت، نسخة طبق الأصل، CQRS، async).

7) إدارة المخاطر

سجل المخاطر: التحديد، والوصف، والاحتمال، والأثر (التمويل/جيش تحرير السودان/التنظيم)، والمالكون، وخطط الوقاية/الاستجابة.
الفئات: الحمل (الحمل الزائد)، البنية التحتية (فشل المنطقة/المنطقة)، التبعيات (مقدمو الدفع)، الإطلاق (الانحدار)، المنتج (ارتفعت الحملة أقوى من التوقعات)، الامتثال (الحدود/المنظم).
Matrix: Heatmap (Low/Medium/High × Impact).
KRI (مؤشرات المخاطر الرئيسية): عمق قائمة الانتظار، نمو p99، انخفاض نسبة الإصابة، معدل الحرق> 2 ×، أخطاء المزود.

8) الإنذار المبكر والتنبيه

SLIs للإنذار المبكر: نمو p95، انخفاض ذاكرة التخزين المؤقت، نمو وقت الذيل، نمو إعادة المحاولة/المهلة، زيادة تأخر المستهلك.
تنبيهات معدل الحرق على أخطاء الميزانية: نوافذ سريعة (1 ساعة) وبطيئة (6-24 ساعة).
التنبيهات القائمة على العتبة والشذوذ: عتبات خط الأساس + نماذج الشذوذ (IQR, STL, stream detectors).
تجميع الإشارات: ارتباط أحداث الإطلاق/phicheflag/الحملة بالتدهور.

9) تحليل السيناريوهات و «ماذا لو»

«إذا كانت حركة المرور تنمو + 60٪ في 10 دقائق ؟»

«إذا كانت CDN/WAF تقطع 5٪ من حركة المرور المشروعة ؟»

«إذا خسر مزود الدفع 30٪ من التصاريح ؟»

لكل سيناريو: المقاييس المتوقعة، الاختناقات، خطوات التدهور (تبديل الميزات غير الحرجة)، يدويًا/على نطاق تلقائي، مزودي التبديل.

10) اختبار التوقعات والتحقق منها

اختبارات الحمل: حركة المرور الاصطناعية (k6/JMeter/Locust)، ملامح مزيج حقيقية.
أيام اللعبة/الفوضى: تعطيل AZ، تحلل قاعدة البيانات، استنفد المسبح.
الظل/الظلام: حركة المرور «في ظل» المسار الجديد دون التأثير على الحث.
الدقة بأثر رجعي: MAPE/SMAPE/RMSE + بعد الوفاة "أين كنت مخطئًا ؟ ”.

11) العمليات والأدوار

• المسؤولة: محللو SRE/Platform/DS.
• مسؤول: رئيس العمليات/SRE.
• تمت استشارته: Dev Leads، Marketing، Finance (FinOps).
• معلومات مطلعة: الدعم/الامتثال/الأعمال التجارية.
• الإيقاع: تحديثات التوقعات الأسبوعية، ومراجعات SLO/Capacity الشهرية، وغرف الفيديو قبل الحدث.

12) الأدوات والمكدس

البيانات: كافكا، ClickHouse/BigQuery، Lake/DWH، dbt.
المراقبة: Prometheus، Grafana، Tempo/Jaeger، Loki/ELK، OTel.
ML/التوقعات: تدفق الهواء/Argo، متجر الميزات، طرازات ARIMA/ETS/GBM، خدمة التنبؤ (gRPC/REST).
Тесты: k6/JMeter/Locust، حقن الخطأ/شبكة الفوضى.
الإدارة: أعلام الميزات، التزلج التلقائي (HPA/KEDA)، السياسة كرمز.
FinOps: مستكشف التكلفة، showback/chargeback، $/RPS لوحات القيادة.

13) ممارسة التنفيذ (خارطة الطريق)

1. جرد المقاييس والتبعيات → خريطة المسار الحرجة (الإيداع، السعر، الناتج).
2. SLO/SLI وميزانيات الأخطاء → الهدف p95/p99، معدلات الخطأ، تنبيهات الحرق.
3. جمع البيانات وتنظيفها → حدث واحد/طبقة مترية، تفريغ، زمن انتقال.
4. التوقعات الموسمية الأساسية → أنماط اليوم/الأسبوع، العطلات/المباريات.
5. التوسع من قبل السائقين → حملات السوق، الإصدارات، الجغرافيا، نوافذ الدفع.
6. نماذج السعة حسب الخدمات → مساحة الرأس، الحدود، الاختناقات، خطة التحسين.
7. سيناريو «ماذا لو» وجدول التحلل (مفاتيح القتل، القراءة فقط، النعمة).
8. التحقق من خلال الاختبارات/الظلال → تعديل النماذج والعتبات.
9. روتين التشغيل → التنبؤات الأسبوعية، مراجعات ما قبل الحدث، الرجعية بعد الحدث.
10. → الأتمتة تلقائيًا وفقًا للتوقعات، والتبديل التلقائي لمقدمي الخدمات، والبطء التلقائي.

14) أنتيباترن

تنبؤ «متوسط فقط» بدون ذيل p95/p99.
تجاهل قوائم الانتظار والمسابح - تظهر المشاكل في الذروة.
يدوي بالعين دون التحقق من الصحة ومقاييس الدقة.
لا توجد صلة → تكاليف التوسيع الزائد.
عدم وجود خطة للتدهور وزخارف.

15) لوحات القيادة والإبلاغ

لوحة القيادة التنفيذية: توقعات RPS/TPS (p50/p90/p95)، مساحة الرأس، بطاقة المخاطر، معدل الحرق.
لوحة القيادة التقنية: p95/p99 زمن الوصول حسب الخدمات، قوائم الانتظار/التأخير، نسبة الإصابة، تجمع الاتصال، قاعدة البيانات/ذاكرة التخزين المؤقت، حدود واجهة برمجة التطبيقات الخارجية.
المالية: $/RPS، توقعات التكلفة، تأثير التحسين.
دقة التنبؤ: التوقعات الفعلية مقابل التوقعات، الفترة/خطأ جغرافي/قناة.

16) أنماط القطع الأثرية

سجل المخاطر: الهوية، المخاطر، الاحتمالات/التأثير، المالك، KRI، خطة الوقاية، خطة التفاعل.
ورقة السعة: الخدمة، الإنتاجية الحالية، الحد، عنق الزجاجة، مساحة الرأس، التوسع المطلوب، إيتا/التكلفة.
بطاقات What-If: سيناريو، عوامل الإدخال، المقاييس المتوقعة، الإجراءات، معايير الإنجاز.
Playbook Degrade: list of features to disable, QoS levels, cache/static routes, retry/timeout limits.

17) وظائف KPI الرئيسية

تنفيذ SLO (النسبة المئوية للفترات المستهدفة)، وقت الاستجابة للمؤشرات المبكرة، دقة التنبؤ (MAPE/SMAPE)، عدد الحوادث بسبب الحمل الزائد، حصة القياس التلقائي، وفورات الدولار/RPS دون تدهور SLO.

المجموع

التنبؤ بالأحمال والمخاطر هو حزمة: بيانات الجودة → مقاييس ذات مغزى → نماذج قابلة للاختبار → سيناريوهات وكتب لعب → أتمتة التوسع والتدهور. يوفر هذا المحيط الاستقرار وإمكانية التنبؤ بالتكاليف وتجربة مستقرة للمستخدم حتى في القمم القصوى.