מודיעין החלטות

מודיעין החלטה

אינטליגנציית החלטה (באנגלית: Decision Intelligence, בראשי תיבות: Direction Intelligence, בראשי תיבות: Direction Int MLOPs/Operations.

1) מסגרת DI: OODA/SSDL

צפה (אות): אירועים סטנדרטיים, איכות/רעננות, דידאפ והקשר.
אוריינט (חוש): קוהורטות, מקטעים, גרפים סיבתיים, פרופילי סיכון.
החלטה: מדיניות (כללים/מודלים/שודדים), התחשבות במגבלות ועלות הטעויות.
מעשה: תזמור של פעולות, ערוצים, אידמפוטנטיות, סדר עדיפויות.
למד: אומדן אפקט סיבתי, עדכון סף/מדיניות/מודלים.

2) כלכלה של פתרונות

פונקציית ערך: מס הכנסה/שמר על נזקים/שמירה/איכות השירות.
עלות השגיאה: FP/FN בכסף וסיכון (RG/ציות/מוניטין).

[
EV = p_{\text{uspekh? ?\cdot value - p_{\text{vred ?\cdot Harm
]

הפעולה מותרת אם ”EV-0” ומעקות הבטיחות תקינים.
תיאבון סיכון: מגבלות על FPR, תדירות התערבויות, תקציב נזק/תלונה, תקציב שגיאה.

3) סיבתיות ואבחנה

כאשר תחזית מספיקה: הקצאות בסיכון נמוך, דירוג על ידי הסתברויות.
כאשר יש צורך בסיבתיות: ROMI, מדיניות מחיר/הגבלה, בטיחות/ציות. השתמש ב A/B, DiD, RDD, IV, בקרה סינתטית; כאשר מיקוד - התרוממות וקייט.
לולאה עובדתית נגדית: אפקט president = pression affect = * המרה של מעלה/סף.

4) סוגי מדיניות

חוקים (מדיניות-כקוד): דטרמיניסטי, מוסבר; בסיס וכשל בטוח.
מבוסס ניקוד: הסתברויות/שיעור, היסטרזיס, סף רגיש עלות.
קונטקסטואלי (שודדים): חמדנים/תאבי בצע/תומפסון לבחירת הצעות/ערוצים.
אסטרטגיות ריבוי שלבים מוגבלות (RL בטוח).
מרכיבים: Cascade - security/comployment acconomy # UX.

5) ארכיטקטורה DI

נתונים: אירועים קנוניים (UTC, גרסאות), פיכסטור (זוגיות מקוונת/לא מקוונת), ספרייה.
מודלים: רישום/גרסאות, כיול, ניטור סחף (PSI/KL), PR- AUC/Recall @ FPR ladx%.
סמנטיקה ומדדים: מילון אחד של מעקות בטיחות/KPI, רעננות SLO.
מנוע מדיניות: טבלאות החלטה, ABAC/קונטקסט, היסטרזיס, מגבלות קצב, סדר עדיפויות.
תזמורת פעולה: משלוח מובטח, retrai, idempotency 'action _ id', DLQ.
Observability: trace 'correlation _ id', infrenel ”signal # decision # action action”.
אבטחה: RLS/CLS, מסווה PII, גישה ויומן החלטות.

6) הבלש המטרי

איכות פתרונות

החלטה דיוק/זכור: על ידי הצלחה אמיתית של המעשים.
חרטה/אובדן הזדמנויות: מפגר מאחורי מדיניות אופטימלית.
כיסוי: הפרופורציה של אובייקטים שקיבלו פעולה.
Latency p95: Signal # החלטה/החלטה # פעולה.
הגינות/הרמס: הפרש שגיאות קטע, תלונות, ערעורים.

השפעה עסקית

פעולות ROMI/ROI, uplift @ k, קיני/AUUC.
תועלת נטו: אפקט עלות נזק.
זמן לפגיעה: זמן מאות לתוצאה ניתנת למדידה.

7) עיצוב החלטות

1. למסגר את השאלה כהשפעה: ”מהו הרווח האחיזה מ X ב Y מעל T?”

2. צייר DAG, להגדיר קונפליקטים/קולדרים.
3. בחר עיצוב: A/B, ניסוי קוואזי או תחזית רשת + ציון לשעבר פוסט.
4. הגדר פעולה וחלופות, הגבלות ומעקות בטיחות.
5. קבע את פונקציית הערך ותקציב הסיכון.
6. תאר את המדיניות שבטבלת ההחלטות: תנאים = פעולה _ תעלות = התקררות.
7. לתכנן את ההערכה: מדדי אפקט, משך זמן, מקטעי קייט.
8. הגדר את תקרית הריצה וחוקי הנסיגה.

8) היסטרציה, תדירות והתנגשויות

היסטריזה: סף קלט/פלט שונים; מונע מהתערבויות ”מהבהבות”.
התקררות: הפסקה בין מגעים/אילוצים על אותו אובייקט.
קונפליקטים של מדיניות: מטריצות עדיפות; ”אבטחה מקבלת עדיפות”.
מכסות/הגבלת קצב: לכל ערוץ, קטע, משתמש; הפצה הוגנת.

9) רמות של אוטונומיה

1. אדם מחליט שאין מספיק נתונים.
2. סיוע: המערכת מציעה פתרון + הסבר.
3. אוטומטי: פתרונות אוטומטיים בתוך מעקות בטיחות.
4. הסתגלות: סף כוונון אוטומטי/בחירת הצעות (שודדים).
5. אוטונומיה בטוחה תחת הגבלות רשמיות וביקורת.

10) פתרונות תחת אי ־ ודאות

תכנון תרחיש: מצב בסיסי/לחץ/קיצוני; טווח אפקט.
אסטרטגיה חזקה לשגיאות פרמטריות.
אינטואיציה של POMDP: לפעול עם מידע לא שלם; להעריך את עלות המידע (מה ניסוי לעשות).
עדכון בייסיאני: לשלב ידע היסטורי ונתונים עכשוויים.

11) דיאלוג מדיניות ↔ מודל

המודל מייצר קצב/הפצה של תוצאות.
המדיניות לוקחת בחשבון את עלות השגיאות, המגבלות וההוגנות.
קו המחיצה נמצא במדיניות סף החלטה מפורשת עם רישום גרסה.
שינוי סף - על ידי EV, לא רק על ידי ROC/PR.

12) מסמכים וחפצים

דרכון מדיניות (תבנית)

קוד/גרסה, מטרה ו KPI של האפקט

תנאים/תכונות/מודל, היסטריזה/התקררות

פעולות וערוצים, סדר עדיפויות וחריגות הדדיות

מעקות בטיחות (FPR lood x%, latency p95 index y, RG/condition)

ציון: עיצוב מבחן, מדדים, משך זמן

ביקורת/הסבר למשתמש, בעלים

טבלת החלטות (דוגמה)

”מקצה אל קצה” תכנית כריתת העצים

'signal _ id' id' החלטה _ id' action _ id' action 'action _ id' (+ 'corrlation _ id').

13) ממשל וציות

מילון מאוחד של מדדים וניסוח נוסחאות.
ועדת מדיניות: קצין סיכון, מוצר, נתונים, ציות.
ביקורת של החלטות: הסברים, סיבות לסירובים, ערוצי ערעור.
אתיקה והוגנות: ניטור שגיאות על ידי קבוצה; הדרה של מאפיינים מוגנים מהכללים, שבו נדרש על פי חוק.

14) שגיאות תכופות

אופטימיזציה של מטרי פרוקסי במקום אפקט עסקי (גודהארט).
בלבול תחזיות וסיבתיות; רומי ”על ידי קורלציה”.

היעדר היסטרזיס וקירור * דואר זבל/” מהבהב”

נעדר עלות של שגיאות ופגיעה במשתמש.
עריכה שקטה של סף/נוסחאות ללא גרסאות וצ 'אנגלוג.
פעולות ללא הערכה אפקטית ו ”סגירת מעגל”.

15) מדיניות/רשימת בדיקות מערכת טרום שחרור

[ המטרה ] מוצהרת כאפקט סיבתי, פונקציית ערך ותקציב סיכון ניתנים

[ ] DAG נמשך; עיצוב הערכה (A/B/DID/SC) ומדדים נבחרים

[ ] המדיניות מתוארת בטבלת ההחלטות; יש לי היסטריה/התקררות/סדר עדיפויות

[ מודלים ] מכוילים; הסף נגזר ממחיר שגיאה (EV)

[ ] תזמורת הפעולות אידמפוטנטית; # החלטת סיגנל _ action _ gog about

[ ] מעקות הבטיחות וההתראות מוגדרות; חשבונות, וכללי נסיגה מוכנים

[ ] לוחות מחוונים: משפך של החלטות, אפקט (מעלה/ROI), נזק/תלונות, הגינות

[ ] גרסאות/בעלים/זכויות גישה/ציות מתועד

סך הכל

אינטליגנציית החלטה היא מערכת, לא מערכת של מודלים: נתונים אחידים ומדדים = מבט סיבתי וכלכלי של אפקט = מדיניות מפורשת ותזמור בטוח = הערכה קפדנית ולמידה מתמשכת. מערכת כזו מפחיתה את הסיכון, מגדילה את ROI, ומקבלת החלטות ברות רבייה, ניתנות להסבר וניתנות לניהול.