Интихоб ва намояндагӣ
Интихоб ва намояндагӣ
Интихоб интихоби маҷмӯи мушоҳидаҳо барои андозагирӣ, таҷрибаҳо ва таълими моделӣ мебошад. Намояндагӣ маънои онро дорад, ки хулосаҳои намуна ба аҳолии мавриди ҳадаф бидуни ғараз паҳн карда мешаванд. Дар зер тарзи тарҳрезии намуна, арзёбии сифат ва ҷуброни дурусти он оварда шудааст.
1) Мафҳумҳои асосӣ
Аҳолӣ: маҷмӯи мақсадноки объектҳо (ҳама корбарон/сессияҳо/транзаксияҳо).
Чаҳорчӯбаи интихоб: рӯйхат/механизме, ки мо аз он воқеан интихоб мекунем (муайян кардани рӯйпӯшҳо ва "сӯрохиҳо" муҳим аст).
Воҳиди интихоб: корбар, сессия, ҳодиса, муомилот, дастгоҳ.
Намояндагӣ: мутобиқати тақсимоти хусусиятҳои асосӣ дар намуна ва аҳолӣ (бо таҳаммулпазирии тасодуфии хатогӣ).
Тасодуфӣ ва ғаразнок: ихтилофи ҳисобҳо бо ғараз (ғараз).
2) Намудҳои интихоб
2. 1 Эҳтимолият (афзалиятнок)
SRS (тасодуфии оддӣ): эҳтимолияти баробари интихоб.
Табақабандӣ: аҳолии стратификатсияшуда (кишвар/канал/платформа), пас SRS дар доираи табақа → фарқияти камтар ва фарогирии беҳтар.
Кластер: интихоби гурӯҳҳо (рӯзҳо/серверҳо/мағозаҳо); таносуби арзон, вале баландтар.
Систематикӣ: ҳар як унсури kth пас аз оғози тасодуфӣ (маълумоти "асинхронӣ" лозим аст).
PPS (эҳтимолияти мутаносиб ба андоза) - эҳтимолият ∝ андозаи воҳид (масалан, ҳаҷми трафики шарик).
2. 2 Аҷоиб (бо эҳтиёт)
Шароит/ихтиёриён: пурсишҳои фаврӣ, гузоришҳои "клик" → хатари ғаразҳои интихобӣ.
Квота/кӯлулаи кӯл: дар гурӯҳҳои нишонаҳо муфид аст, аммо калибрченкунии минбаъда лозим аст.
3) Манбаъҳои кӯчдиҳӣ
Фарогирӣ: як қисми аҳолӣ дар чорчӯба нест (масалан, маълумоти IOS ҳангоми пайгирӣ манъ аст).
Интихоб: механизми интихоб бо тағирёбандаи ҳадаф алоқаманд аст (бештар фаъол мешавад).
Ҷавоб надодан: Бемасъулиятӣ ба таври мунтазам фарқ мекунад.
Наҷотёфтагон: Нодида гирифтан/бастан.
Тамғакоғазҳо: барчаспҳои ғалоғула, нишонаҳои прокси, тасҳеҳи "дастӣ".
Чеҳраҳо: истифодаи маълумоти оянда дар ташаккули намуна/хусусият.
4) Андоза ва қудрати намуна
4. 1 Тахминҳо
Барои фраксия (p) бо дақиқ (e) ва эътимод (1-\alpha):[
n\increx\frac {z _ {\alpha/2} ii 2, p (1-p)} {e; 2}
]Мо консервативӣ мегирем (p = 0 {.} 5). Агар лозим бошад, ба аҳолии ниҳоӣ мутобиқ шавед.
Барои миёна бо маъруф (\sigma):[
n\increx\чап (\frac {z _ {\alpha/2} ,\sigma} {e }\рост)
]4. 2 Таъсири тарроҳӣ ва андозаи самаранок
Таъсири тарроҳӣ: (\математика {Deff} = 1 + (m-1 )\rho), ки дар он (m) андозаи кластер аст, (\rho) таносуби дохили кластер мебошад.
Андозаи таъсирбахш: (n_\text{eff}=n/\mathrm{Deff}). Тарҳҳои кластерӣ/вазншуда аксар вақт бештар (n) талаб мекунанд.
4. 3 A/B ва MDE
Барои метрикаи бинарӣ бо гурӯҳҳои симметрӣ:[
n_{\text{на gruppu} }\increx\frac {2 (z_{1-\alpha/2}+z_{1-\beta}) * 2 ,\bar {p} (1-\bar {p})} {\mathrm {MDE} § 2}
]ки дар он (\bar {p}) сатҳи асосӣ аст, MDE таъсири ҳадди ақали муайяншаванда аст.
Мавсимият ва мудохиларо (рехтан) ба назар гиред, CUPED/ковариатҳоро барои коҳиш додани ихтилоф истифода баред.
5) Вазнҳо ва калибрченкунӣ (мо ба аҳолӣ "монанд" -ро интихоб мекунем)
Вазнҳои тарроҳӣ: (w_i=1/\pi_i) (эҳтимолияти баръакси интихоб).
Табақабандӣ ва раккосӣ: мо ҳадди вазнро (кишвар/платформа/синну соли гендерӣ ва ғайра) ба фраксияҳои маълум мутобиқ мекунем.
Вазни калибрченкунӣ: инҳирофи вазнҳоро ҳангоми мувофиқат бо маҷмӯи назорат кам кунед.
Боркунӣ/нусхабардорӣ: баҳодиҳии дурусти фарқиятҳо дар вазн.
Ташхис: ESS (андозаи самарабахши интихоб), паҳншавии вазн (CV, p95/p5), пеш аз/пас аз муқоиса бо хусусиятҳои асосӣ.
6) Номутавозунии синф ва рӯйдодҳои нодир
Интихоби стратификатсияшуда аз рӯи ҳадаф: аз ҳад зиёд як синфи нодир аст, аммо ҳамеша дар танзими ҳадди вазн/вазн истифода мебарад.
Омӯзиши ҳассос ба хароҷот: талафоти вазнин ба ҷои синтетика.
SMOTE/ADASYN: эҳтиёт - хатари ихроҷ/артефактҳо; тақсимоти қатъии вақт/гурӯҳро нигоҳ доред.
Рейтинг: PR-AUC, Recall @ FPR ≤ x%; калибрченкунии эҳтимолият.
7) Маълумотҳои ҷараён ва калон
Интихоби обанбор: Як ҷараёни намояндаро аз ҷараёни дарозии номаълум нигоҳ доред.
Интихоби ҳодиса: мутаносиб ба басомад/аҳамият; барои нодир - буферҳои триггер.
Ҳисобкунакҳо ва эскизҳо: Блум/Ҳисоб-Мин барои басомадҳо/беҳамто; барои таҳлил - якҷоя бо ҳисобкунии дақиқи даврӣ.
De-dup ва idempotency - калидҳои ҳодиса, тирезаҳои дефликатсия.
8) Ҷанбаҳои муваққатӣ ва фазоӣ
Интихоби вақт: тирезаҳои собит (ғелонда), дурустии нуқта дар вақт.
Кластер/гео-интихоб: кластер аз рӯи гиреҳ/минтақа; автокоррелатсияи фазоиро баррасӣ кунед.
Мавсим/ритм: фарогирии намояндагии соатҳо/рӯзҳои ҳафта/ид.
9) Маълумот ва сабабҳои берун аз сиёсат/сабти ном
10) Ташхиси намояндагӣ
Муқоисаи ниҳоӣ: ҷадвалҳои аҳолӣ ва намуна аз рӯи хусусиятҳои асосӣ.
Тавозуни ковариатҳо: SMD (фарқияти миёнаи стандартӣ), қитъаҳои муҳаббат.
Зичӣ/миқдор: санҷишҳои KS, қитъаҳои квантӣ, PSI.
Тахассуси моделӣ: мӯътадилсозии ченакҳо дар иловаро дар вақти нопурра ва берун аз домейн.
ESS ва вазнҳо: ESS паст фарқияти баландро дар холҳо нишон медиҳад.
11) Анти-намунаҳо
"Намуна танҳо дирӯз фаъол" → аз даст додани хунук/хуфтаҳо.
Фоизи миёнаи "миёнаи сегмент" бе вазн.
Сатҳи ҷамъбаст (рӯйдодҳо ва корбарон) -ро дар як намуна омехта кунед.
Интихоби тасодуфӣ пас аз филтрҳои ба ҳадаф вобаста (интихоб дар натиҷа).
Кросс-вал бидуни гурӯҳ/вақт бо маълумоти вобастагӣ тақсим мешавад.
SMOTE-ро пеш аз қатор/val (ихроҷ) ба кор баред.
12) Сенарияҳои хусусӣ (ҳолатҳо)
Тадқиқоти бозингар: аз рӯи кишвар/платформа/синну сол тақсим карда шудааст; пас аз табақабандӣ ба саҳмияҳои MAU; назорати ҷуброни бемасъулият.
Гузоришҳо барои EDA: намунаҳои систематикӣ 1:N рӯйдодҳо + фарогирии пурраи намудҳои нодир.
Муайянкунии қаллобӣ: стратификатсияи мақсаднок, талафоти ҳассос, холҳои PR-AUC ва Recall @ FPR ≤ x%.
A/B бо трафики маҳдуд: ҳисобкунии MDE, таҷдиди қоидаҳои барқ, CUPED.
Таблиғи арзёбии берун аз сиёсат: IPS/DR бо маҳдудияти вазн (буридан), санҷиши такрори дастгирӣ.
13) Намунаҳои артифакт
Нақшаи интихоб (қолаб)
Ҳадаф/Аҳолӣ:...
Қуттии интихоб: манбаъҳо, сарпӯшҳо/сӯрохиҳо
Воҳиди интихоб: корбар/сеанс/ҳодиса
Тарроҳӣ: қабатҳои (кишвар, платформа), саҳмияҳо, усули интихоб
Андоза (n): ҳисобҳо, пиндоштҳо (α, қудрат, MDE), Deff
Нақшаи вазн: вазнҳои тарроҳӣ, пас аз стратификатсия (маҷмӯи назорат)
Тақвим: фарогирии рӯз/соат/истироҳат
Сифат: санҷишҳои фарогирӣ, нақшаи ҷавоб, тартиби тамос
Хатарҳо: интихоб, мудохила, махфият/PII
Соҳибон ва назорат: кӣ ҳисоб мекунад/мағозаҳо/версияҳо
Шиносномаи вазн (қолаб)
Вазнҳои асосӣ: (w_i=1/\pi_i)
Калибрченкунӣ: ҳадафҳо (кишвар, платформа, синну сол), усул (тақаллуб), таҳаммулпазирӣ
Маҳдудиятҳо: буридани w ∈ [w_min, w_max]
Ташхис: ESS, CV (w), SMD пеш аз/баъд
Истифода: кадом ҳисоботҳо/моделҳо вазнҳоро истифода мебаранд
Версияҳо: v1 → v2, сана, соҳибон
14) Махфият ва ахлоқ
Махфият аз рӯи тарроҳӣ: кам кардани майдон, ҷамъбаст, псевдонимизатсия.
Махфияти дифференсиалӣ: тасодуфӣ/зергурӯҳ ҳамчун тақвияти дахолатнопазирӣ.
Адолат: Фарқияти хатогӣ/вазнро аз хусусиятҳои ҳассос санҷед; нагузоред, ки гурӯҳҳо "ноаён" бошанд.
15) Рӯйхати санҷиши пешакӣ
- Қуттии интихоб тавсиф карда шудааст; сӯрохиҳои рӯйпӯш муайян ва ҳуҷҷатгузорӣ карда шудаанд
- Тарҳи интихобшуда (қабатҳои/кластерҳо), ҳисобшуда (n), Deff, MDE
- Танзими вазнҳои тарроҳӣ ва нақшаи калибрченкунӣ (маҷмӯи назорат мувофиқа карда шудааст)
- Тирезаҳои вақт/мавсимӣ муайян карда мешаванд; нақшаи аз ҷониби nonsponse вуҷуд дорад
- Тақсимоти санҷиш вақт/гурӯҳҳоро баррасӣ мекунад; ягон ихроҷ нест
- Нишондиҳандаҳои сифат: ESS, SMD, PSI, фосилаҳои пурборшаванда
- Ҳуҷҷатгузорӣ ва версияҳо; ҳуқуқи дастрасӣ ва контурҳои махфият тафтиш карда мешавад
Луғати хурд
Deff: мултипликатори фарқияти афзояндаи холҳо аз ҳисоби тарроҳӣ.
ESS: андозаи самараноки намуна пас аз вазн.
IPS/DR: усулҳои вазн барои маълумоти берун аз сиёсат/сабти ном.
SMD: фарқияти миёнаи стандартӣ (тавозуни ковариатӣ).
Интихоби обанбор: нигоҳ доштани намунаҳои тасодуфӣ аз ҷараён.
Ҷамъ
Намояндагӣ "бо намуна хушбахт нест", балки як раванди тарроҳишуда: чаҳорчӯбаи дуруст, тарҳи интихоби оқилона, андозаи кофӣ, вазн ва калибрченкунӣ, тақсимоти софдилона ва ташхиси дақиқ. Бо риояи таҷрибаҳои тавсифшуда, шумо ғаразро коҳиш медиҳед, қобилияти хулосаҳоро баланд мебардоред ва қарорҳои боэътимоди маҳсулот, маркетинг, хавф ва ML мегиред.