Моделҳои пешгӯишаванда
Моделҳои пешгӯишаванда
Моделҳои пешгӯишаванда алгоритмҳое мебошанд, ки арзишҳо ё рӯйдодҳои ояндаро дар асоси маълумоти таърихӣ ҳисоб мекунанд. Онҳо асоси таҳлили маҳсулот, идоракунии хавфҳо, маркетинг, зидди қаллобӣ ва оптимизатсияи амалиётӣ мебошанд. Дар зер дастури амалӣ оварда шудааст: аз интихоби матни вазифа то фаъолият ва назорати сифат.
1) Таҳияи вазифаҳо ва сигналҳо
Регрессия: пешгӯии арзиши доимӣ (LTV, андозаи амонат, андозаи чек).
Таснифот: эҳтимолияти ҳодиса (хуруҷи муштариён аз 30 рӯз, қаллобӣ/қаллобӣ).
Гурӯҳбандӣ: фармоиш додани объектҳо аз рӯи аҳамият (тавсияҳо).
Силсилаи вақт: пешгӯии тақвим (трафик, сарборӣ, даромад).
Зиндагӣ/вақт ба ҳодиса: вақти тахминӣ барои баромадан/баргардонидан.
Моделсозии болоӣ: афзоиши таъсири таъсир (ки саҳмия воқеан рафторро тағйир медиҳад).
Истеҳсолоти бисёрқабата/бисёрҷанба: дар як вақт якчанд ҳолатҳо/чорабиниҳо.
Моделҳои Байесян ва эҳтимолият: пешгӯӣ бо номуайянии намоён.
2) Маълумот ва тайёрӣ
Равзанаи ғалладона ва мушоҳида: Воҳиди пешгӯиро (корбар/сессия/рӯз) ва "равзанаи" ростқавлро барои ҷамъоварии хусусиятҳо то лаҳзаи пешгӯӣ муайян кунед.
Тағйирёбандаи ҳадаф: таърифи возеҳ, уфуқҳо (7/30/90 рӯз), рафъи ихроҷи оянда.
Хусусиятҳо: агрегатҳо аз рӯи тирезаҳо (7/30/90), басомадҳои рафторӣ, пайдарпаӣ, рамзгузории категориявӣ, таъсири мутақобила, омори сегмент.
Сифати маълумот: камбудиҳо, берунӣ, нусхабардорӣ, тағирёбии ноҳиявӣ, мувофиқати вақт.
Тавозуни синф: табақабандӣ, вазн, аз ҳад зиёд/зеризаминӣ - эҳтиёт шавед, ки ғаразро ҷорӣ накунед.
3) Интихоби алгоритмҳо
Хатти асосӣ: регрессияи хатӣ/логистикӣ, регуляризатсия (L1/L2/Elastic шабака) - зуд, тафсиршаванда.
Дарахтон ва ансамблҳо: Ҷангали тасодуфӣ, мустаҳкамкунии градиентӣ (XGB boost/Light
Шабакаҳои асабӣ: MLP/Seq2Seq/Transformer барои намунаҳои мураккаб (матнҳо, пайдарпайҳо, силсилаи вақт).
Силсилаи вақт: ARIMA/ETS, Паёмбар, Баланд бардоштани градиент бо ақибмонӣ, Трансформатори Deep
Баландӣ: равиши думарҳилавӣ, T-Learner/S-Learner/X-Learner, дарахтони эффекти сабабӣ.
Зиндагӣ: Кокс, AFT, ҷангалҳои наҷотбахши тасодуфӣ.
Байесян: GLM/моделҳои иерархикӣ бо тақсимоти қаблӣ.
Амал: Аз заминаи оддӣ ва репродуктивӣ оғоз кунед, танҳо бо дастовардҳои назаррас дар ченакҳо ва устуворӣ мушкилӣ илова кунед.
4) Ҷудокунӣ ва тасдиқкунӣ
Резюмеи муваққатӣ: барои вазифаҳо бо вақт - қисматҳо аз рӯи санаҳо (печондан/васеъ кардани тирезаҳо).
Табақабандӣ: барои синфҳои нобаробар.
Санҷиши гурӯҳӣ: пешгирии "ихроҷ" байни гурӯҳҳо (user_id, campaign_id).
Санҷиши берунӣ: санҷиши ниҳоӣ дар давраи "оянда".
Асосҳо: содда (арзиши охирин, миёна), басомад, логрегияи оддӣ - барои чен кардани арзиши воқеӣ.
5) Нишондиҳандаҳои сифат
Таснифот: ROC-AUC, PR-AUC (дар рӯйдодҳои нодир муҳим аст), логлосс, холҳои Бриер, F1, дақиқ/ёдрас @ k, лифт/NDCG.
Регрессия: RMSE/MAE/MAPE, sMAPE, R ², талафоти квантӣ (барои фоизҳо).
Силсилаи вақт: MAPE/SMAPE/MASE, талафоти Pinball (пешгӯии квантӣ).
Зиндагӣ: Индекси мувофиқат, Brier барои вақт-ҳодиса.
Баландӣ: Qini, uplift @ k, AUUC.
Нишондиҳандаҳои тиҷорат: фоидаи афзоянда, корбарони нигоҳдошта, коҳиши қаллобӣ, SLA-ҳои дақиқ.
Тавсия: ҳамеша ду сатҳи ченакҳоро нигоҳ доред - "ML-сифат" ва "таъсири бизнес".
6) Калибрченкунӣ ва ҳудудҳо
Калибрченкунии эҳтимолият: Платт, изотоникӣ, миқёси ҳарорат.
Интихоби ҳадди ниҳоӣ: аз рӯи ҳадафҳои тиҷорат (ҳадди аксар фоида/маҳдудияти мусбати бардурӯғ), аз рӯи хароҷот/ҷарима.
Устувории ҳадди ниҳоӣ: мониторинг бо назардошти тағирот дар тақсимот.
7) Тафсир ва фаҳмондадиҳӣ
Глобалӣ: аҳамияти хусусиятҳо (фоида, пермутутсия), хулосаҳои PDP/ICE, SHAP.
Маҳаллӣ: SHAP/LIME барои шарҳ додани ҳалли объект.
Шарҳ: Тафсир як воситаи тасдиқи гипотеза ва эътимод аст, на "ҳақиқат" -и мутлақ.
8) Ҷойгиркунии мубориза
Хизматрасонӣ: онлайн (REST/GRPC, таъхири кам) ва партия (ҳар соат/рӯз).
Версия: моделҳо, додаҳо, схемаҳо ва хусусиятҳо (феҳрист).
Fichestores: мувофиқати онлайн/офлайнӣ, дурустии нуқта дар вақт.
Назорати таъхир: буҷаи истихроҷи хусусиятҳо, хулоса, равандҳои баъдӣ.
Бехатарӣ: қоидаҳои пешфарз, таназзули ибтидоӣ, танаффус ва бозхонд.
A/B ва тадриҷан: релизҳои канарӣ, оинаи соя/хулоса.
9) Мониторинг ва кашолакунӣ
Сифат: ченакҳои фурӯш (ROC-AUC/PR-AUC бо тамғакоғазҳои таъхиршуда, бизнес KPI).
Тақсимот: PSI/JS-divergence/KL, фарқият ва ҳадаф.
Саломатии маълумот: ҳиссаи холигоҳҳо, кардинализатсияи категорияҳо, хӯшаҳо, таъхири қубурҳо.
Ҳушдор ва SLO: ҳудудҳо, runibooks (ҳангоми таназзул чӣ бояд кард).
Бозомӯзӣ: аз рӯи ҷадвал, аз рӯи триггерҳои дрифт, аз рӯи мавсимӣ; назорати регрессияи сифат.
10) Бехатарӣ, риоя ва ахлоқ
Махфият: кам кардани маълумот, тахаллус, назорати дастрасӣ.
Адолат: санҷиши ғаразҳо аз рӯи сегментҳо (меъёри бардурӯғи мусбат/манфӣ), танзими намунаҳо/ҳудудҳо.
GDPR/меъёрҳои маҳаллӣ: ҳадафҳои коркард, мӯҳлати нигоҳдорӣ, ҳуқуқи шарҳ додан.
Аудит ва репродуктивӣ: пайгирии версия, маҷлисҳои репродуктивӣ, сабти ҳалли масъала.
11) Қолибҳо барои парвандаҳои маъмулӣ
Чурн: таснифи бинарӣ; ченакҳо - PR-AUC, санҷиши баланд барои маъракаҳои нигоҳдорӣ; хулоса - афзалияти пешниҳодҳо.
Антифрауд: таснифи тавозуни баланд; ченакҳо - PR-AUC, ба хотир оред @ low-FPR; маҳдудиятҳои қатъии ниҳонӣ.
LTV/ARPPU: регрессия ё регрессияи квантӣ; азнавбаҳодиҳии мунтазам.
Пешгӯии сарборӣ/даромад: силсилаи вақт; ансамбли моделҳои оморӣ ва ML; мавсимӣ ва идҳо ҳамчун хусусиятҳо.
Тавсияҳои шахсӣ: рейтинг/матрица/seq-моделҳо; навсозиҳои онлайн ва истисмор (бандитҳои мусаллаҳ).
12) Раванд (ML Lifecycle)
1. Мушкилот ва KPI → 2. Маълумот ва хусусиятҳо → 3. Базаи → 4. Моделҳо ва → интихоб
2. Калибрченкунӣ ва ҳудудҳо → 6. Санҷиш ва A/B → 7. Хизмат ва мониторинг → 8. Бозомӯзӣ/эволютсия.
Ҳар як марҳила ҳуҷҷатгузорӣ карда мешавад: диаграммаҳои маълумот, конфигуратсияҳои омӯзишӣ, версияҳои артефактҳо, натиҷаҳои таҷрибавӣ.
13) Муҳандисии хусусият (мухтасар)
Агрегатҳо: ҷамъҳо/миёнаҳо/миқдорҳо аз рӯи тиреза.
Ҳисобкунакҳо ва басомадҳо: табдилдиҳӣ, камёфт будани категорияҳо.
Вақт ва тамоюлҳо: deltas, smoothes экспоненсиалӣ.
Категорияҳои рамзгузорӣ: рамзгузории ҳадаф/статистика (бо ихроҷи бодиққат), WOE, як-гарм/Hashing.
Матнҳо ва рӯйдодҳо: TF-IDF, воридкунӣ, хусусиятҳои пайдарпай.
Мантиқи тиҷорат: хусусиятҳои домейн (масалан, "шумораи рӯзҳо бо пардохти охирин").
14) Идоракунии таҷриба
Пайгирӣ: ченакҳо, параметрҳо, артефактҳо, маҷмӯаҳо.
Гиперпараметрҳо: даъвои Байесян, ҷустуҷӯи тасодуфӣ/шабака, таваққуфи барвақт.
Назорати хусусият: каталоги маълумот, шартномаи ноҳиявӣ, санҷишҳои мутобиқат.
15) Рӯйхати санҷиши пеш аз фурӯш
- Ҳеҷ гуна ихроҷи оянда; тасдиқи муваққатии дуруст
- Метрҳо ба тобовар тобовар мебошанд; озмоиши OOT гузаронед
- Калибрченкунӣ тасдиқ карда шуд; ҳадди тиҷорат интихоб карда шуд
- Хусусияти маълумот ва ҳуҷҷатҳои шартнома
- Функсияҳои таназзул ва ҳушдор танзим карда мешаванд
- Нақшаи бозомӯзӣ ва боздоштани меъёрҳо
- Санҷишҳои ҳуқуқӣ ва ахлоқӣ гузаштанд
Луғати хурд
Тақсимоти тақсимот: тағир додани омори маълумот/ҳадаф бо мурури замон.
Калибрченкунӣ: кам кардани эҳтимолият ба басомади воқеии ҳодисаҳо.
Баландшавӣ: пешгӯии фарқияти таъсир байни "табобат" ва "назорат".
Санҷиши OOT: Санҷиши моделӣ дар даврае, ки ҳангоми омӯзиш/санҷиш комилан ноаён аст.
Ҷамъ
Модели пешгӯишаванда на танҳо алгоритм, балки раванд аст: изҳороти дурусти мушкилот, интизоми маълумот, санҷиши қатъӣ, қубурҳои такрории дубора, мониторинг ва ахлоқ. Пас аз сикли тавсифшуда хатари "ченакҳои зебои офлайнӣ" -ро коҳиш медиҳад ва арзиши воқеии маҳсулотро зиёд мекунад.