Ընդհանուր հաշվարկային ռեսուրսներ

1) Ի՞ նչ է «ընդհանուր հաշվարկային ռեսուրսները»

Ընդհանուր հաշվարկային ռեսուրսները (OVR) տրամաբանորեն միասնական CPU/GPU/հիշողության/սկավառակի/DA/DA (wwwww.availability), որն ապահովում է բազմաթիվ դերեր (զարգացողներ, հանգույցների օպերատորներ, տվյալների/բովանդակության պրովայդերներ, վերլուծաբաններ, ML-թիմեր) ստանդարտացված ինտերֆեյսների, քաղաքականության և խթանների տնտեսագիտության միջոցով։ Նպատակն է բարձրացնել հեռացումը, նվազեցնել ծախսերը և ապահովել կանխատեսելի արտադրողականությունը բազմաբնույթ և միջանձնային սցենարներում։

2) Ռեսուրսների տաքսոնոմիա

Հաշվարկները ՝ CPU (ընդհանուր նշանակումը), GPU (ուսուցում/ինֆիս), NPU/TPU (ML արագացուցիչներ)։

Հիշողությունը և սկավառակները ՝ RAM, տեղական NVMe, օբյեկտի/բլոկային պահեստ, քեշներ (Redis/KultDB)։

Ցանցը 'կարողություն, egress/ingress, QoS դասարաններ, մասնավոր ալիքներ։

Տվյալները և DA 'հրապարակման, վերարտադրման, սարքավորումների և ապացույցների պահպանման քվոտաներ։

Ծառայողական լիմիտներ 'ենթատեսակների/բեռնարկղերի քանակը, բաց ֆայլերը, ձայնագրիչները, GPU միկրոկլեկտիվացիան (MFC)։

3) Սպառման մոդելները (workload types)

Առցանց/ցածր ուշացում 'API, խաղալիք, խաղային/ֆինտեխի ուրվագիծ, քրոսն-չեյն մեսենջինգ։

Striming/real-timm 'իրադարձությունների վերամշակում, anti-frod, հեռուստատեսություն, real-time վերլուծություն։

Batch: ETL/ELT, հաշվետվությունները, պարբերական հաշվարկները, ֆիչի պատրաստումը։

ML/AI 'ուսուցում (GPU-ինտենսիվ), ինֆիս (ցածր ուշացում/բարձր հակադարձում)։

Մոսկվան և քեշները ՝ OLTP/OLAP, lakehouse, CDN/edge kash։

Յուրաքանչյուր դասարանի համար տեղադրվում են SLO, գերակայություններ, մեկուսացում և սակագներ։

4) Նվագախումբը և պլանավորումը

Շեդուլինգը առաջնային և QoS դասարանում 'EDF/LLF «Dedlins» -ի համար, գերակայական գծեր, որոնք երաշխավորված են «նվազագույն»։

Ռեսուրսների հարցումները ՝ «reques.ru/limits» CPU/Memory, GPU քվոտաներ և բաժնետոմսեր, wwww.emptible/spot-puls խնայելու համար։

Anti-աղմուկ 'cgroup/փոխհատուցում «entisy neighbor», NUMA-pinning, ցանցային պոլիսներ։

Տեղաբանություն և տեղաբանություն 'տվյալների և հաշվարկների co-ինդեքսավորում, affinity/anti-affinity, edge-կապիկ։

Ավտոմոբիլացումը 'հորիզոնական (HPA), ուղղահայաց (SNA), կլաստեր (CA), GPU/DA-բատչի համար ավտոմատ պիլոտ։

5) Բազմաբնույթ և մեկուսացում

Уровни: namespace→project→org (budget/quotas/ACL).

Մեկուսացում ՝ բեռնարկղեր, VM, ավազներ (gVisor/Firecracker), ցանց (MSC/NetworkPolicy), ռուսական (CSI պոլիսներ)։

Աղմուկի քաղաքականությունը 'IOPS/egress, «fox-2019» պլանավորումը, dedicated-tiers կրիտիկական ծառայությունների համար։

Սխալների/ռեսուրսների բյուջեները ՝ per-tenrenserror budget և resource budget-դեգրադացիայի հետ։

6) QoS, առաջնահերթություն և SLO/SLA

QoS: Q4 (քննադատական-pealtime), Q3 (պատվիրված), Q2 (exactly-once), Q1 (at-leport-once), Q0 (best effect)։

SLO օրինակներ ՝ p95 latency API 24200 ms (Q4), GPU սպասման հերթը 242 րոպե (Q3), batch պատուհանի T 3530 րոպե (Q1)։

QoS-ի պայմանագիրը ռուսական ռեսուրսներ է, յուրաքանչյուր դասարան ապահովվում է երաշխավորված քվոտաներ և արտակարգ «stop-rans»։

7) Տնտեսագիտություն և մոնետիզացիա (բիլինգ/խթաններ)

Սակագնի միավորներ ՝ vCPU-վայրկյան, GiB-ժամացույց RAM, GPU-րոպե, GB-storage-mes, GB-egress, DA-bit/հրատարակություն։

Հիբրիդային պլանները ՝ spot/www.emptible զեղչերով։

RevExpress-ը երկաթի/ամսաթվերի կենտրոնների համար 'միգրանցների մասը, SLA բոնուսները/տուգանքները։

Հզորության մարքեթինգը 'հանգույցների/կլաստերների լիստինգը, որակի վարկանիշները, GPU փղերի աճուրները։

Տոկեն տնտեսագիտությունը

U-tocen-ը քվոտաների/լիմիթների վճարումն է, զեղչերը։

S-token - SLA հանգույցների/փամփուշտների գրավը (slashing)։

R-tocen-ը պրովայդերի/վարձողի հեղինակությունն է (գնի/գերակայության փոփոխող)։

RNFT պայմանագրերը անհատական պայմանագրեր են «ռուսական պարտավորության ռեսուրսը» (սահմանափակումներ, գինը, ժամանակահատվածը, KPI, ելքը)։

8) Պայմանագրեր և միջուկի ծառայություններ

Resource Registry: ռեսուրսների տեսակներ, մեքենաների դասարաններ/GPU, հասանելի գոտիներ/edge-POP։

Delta Pro: քվոտաներ/per ten.ru/project, egress/IOPS/DA բյուջեն։

Scheduler/Plac.ru: pods/job/pula, գերակայություններ, տեղականություն, anti-աղմուկ։

Billing & Metering-ը 'միավորների հաշվիչներ, սակագներ, շեղումներ, ալտերտեր։

Rewards Router-ը ռուսական պրովայդերների բաշխումն է, SLA-Brack-ի տուգանքները։

Compliance Gate: Տարածաշրջաններ, PDn/FZDn, տարիքը/KUS սահմանափակումները, միգրանտների արտահանումը։

Observability Hub: metrics/treiss/logs, DLQ ջո, repley։

9) Անվտանգություն և բաղադրիչներ

Վավերացում/հեղինակային իրավունքը ՝ mTSA/OIDC, ABAC/RBAC, «ամենափոքր արտոնությունները»։

Ցանցի սեգմենտացիան 'MSC, private-link, ծառայողական-մայրիկ քաղաքական գործիչների հետ։

Տվյալները 'at-rest/in-transit ծածկագրում, հիմնական նավարկություն, դիմակավորում/ֆիքսված տվյալներ թեստերի համար։

GPU/CPU մեկուսացում 'ուղղակի մուտքի արգելք, DMA/IOMMU վերահսկողություն, պաշտպանություն side-channel-ից։

Կոմպլասենսը 'ռուսական ամսագիրը, տվյալների տեղայնացումը, պահեստավորման քաղաքականությունը/2019, ZK բացթողումները ստուգումների համար առանց բացահայտման։

10) Ուսումնասիրություն և արտադրողականության կառավարում

Մետրիկները ՝ uCPU%, GPU-util, RAM/Cache hit, IOPS/throughput սկավառակը, p95 RTT/egress ցանցը, GPU/Batch-lag։

SLO/SLA-dashbords: «առողջությունը» ըստ QoS դասարանների և վարձակալների, սխալների բյուջեների։

Ավելացումը 'flamegraph-նկարներ, hot path-վերլուծություն, չափի ավտոմատ առաջարկություն։

Ալբերտները 'ավելի բարձր բայեր, GPU-հերթով, egress-պայթյունը, դրոշի «disisy neighbor»։

11) Անտի Ֆրոդը և չարաշահումը

Disbil/bot-2019 'S-գրավչություն, R-հեղինակություն, վարքագծային ազդանշաններ։

Egress/ցանցի սկանավորում ՝ rate limits/IDS, կարանտինյան հատվածներ։

Սպոտային զեղչերի ֆարմինգը 'anti-arb քաղաքականություն, սառեցում, լիմիտներ փամփուշտների միջև։

Անազնիվ պրովայդերներ 'հայտարարված հատուկ վերահսկողություն, սինթետիկ թեստեր, սլեշինգ և RNFT «սև ցուցակներ»։

12) Միջանձնային սցենարները (multchin/edge)

Մուտքի իրավունքի փոխանցումը 'RNFT իրավունքները և քվոտաները փոխանցվում են մեսենջինգի միջոցով, հեղինակությունը (R) մնում է վստահության աղյուսակում։

DA-քվոտաները և հրատարակությունները 'բայթ/հաճախականության սակագինը, վերջնական/ժամանակավոր ամրոցները։

Edge-հաշվարկները 'POP-2019 տեղական բուֆերների հետ, ինֆիսի «խթանումը» ավելի մոտ է օգտագործողին։

Dedup-ը և X-domain-ը 'գլոբալ «x _ job _ id», վերջույթների seen աղյուսակները, challenge ժամանակահատվածները։

13) Տարաների պլանավորում և կայունություն

Capacity planning 'սպառման միտումներ, սեզոնային, N շաբաթ պաշարներ, կարմիր գծեր p95։

Game-days և սթրեսի թեստեր 'GPU/egress/DA, AZ/POP անջատումը, քայքայման սցենարները։

Դիզայնի դեգրադացիան 'graceful fallback (ավելի քիչ ճշգրիտ մոդելներ/kash), Q4/Q3 առաջնահերթությունները։

Կանաչ արդյունավետությունը 'հեռացումը, carbon-aronschelling, սառեցումը/էներգիայի արժեքը, batch տեղափոխումը կանաչ պատուհաններին։

14) Metriki և KPI էկոհամակարգերը OVR էկոհամակարգը

Հեռացումը 'CPU/GPU busy%, RAM/Cache hit, IOPS/GB օգտագործումը։

Արդյունավետությունը 'cost-to-serve/հարցում, սպոտների հեռացում, marge/րոպե GPU։

Որակը 'p50/p95 latency դասարաններում, SLA-bracks/1000 հարցումներ, հերթը/ջո գործարկման ժամանակը։

Արդարություն '«disisy neighbor» ինդեքսը, վարձակալների մասնաբաժինը, քվոտի բաշխումը։

Տնտեսությունը 'եկամուտը/ռեսուրս միավորը, NRR/GRR պլանները, ֆինանսական եկամուտների մասը։

Անվտանգությունը 'մեկուսացման հաճախականությունը, egress-անոմալիան, հեղինակավոր սլեշ իրադարձությունները։

15) ռուսական (կառավարում) ռեսուրսներ

Պարամետրային պրոպոզալները 'սակագների/քվոտի/միջանցքների փոփոխությունը քվեարկության միջոցով։

R-փոփոխողը 'հեղինակությունը սահմանափակում է «հում կապիտալի» ազդեցությունը զգայուն փոփոխություններում։

Sunset-klauzuls: ժամանակավոր բաժնետոմսեր/զեղչեր մեքենայի հետ։

Հանրային հաշվետվությունները 'OVR գանձարանի եռամսյակային հաշվետվությունները, SLA աուդիտը։

16) Գործարկման պլեյբուկը

1. Կարիքների քարտ։ Առաջադրանքների դասարանները, SLO, տվյալների տեղությունը։

2. Փամփուշտների դիզայնը։ Մեքենաների դասարաններ, GPU տիրերներ, storage/network մակարդակներ, edge-POP։

3. Քաղաքական և քվոտաներ։ QoS դասարանները, budgets, egress/IOPS/DA սահմանները։

4. Տնտեսությունը։ Սակագները, քունը/պահուստները, պրովայդերների խթանները, RNFT պայմանագրերը։

5. Անվտանգությունը և ընկերակցությունները։ MTSA/OIDC, կոդավորումը, խմբագրման ամսագրերը, գեո քաղաքականությունը։

6. Դիտարկումը։ Dashbords KPI/SLO, alerts, ավելացում։

7. Օդաչուն և մեծացումը։ Առաջադրանքների մեկ դաս (օրինակ, ինֆիս) բացատրում է batch/striming-ի ընդլայնումը։

8. Միջադեպերը և փոստ-մորտեմները։ Game-days, repleys, քաղաքական/սակագների կարգավորումը։

17) Չեկի թուղթ, պատրաստակամություն

• Որոշված QoS/SLO բոլոր տեսակի խնդիրների համար
• Ներառված են քվոտաներ/լիմիտներ և «fox-2019» պլանավորումը
• Spot/wwww.emptible puls և anti-arb քաղաքականություն
• Իրականացվել են RNFT պայմանագրերը, բիլինգը և Rewards Router-ը։
• Տրամադրվում են մեկուսացում, կոդավորում և համակցված հաշվետվություններ
• Հասանելի են dashbords հեռացման/որակի/տնտեսագիտության։
• Դժբախտ պատահարներ ՝ ստոպա-ներկեր, դեգրադացիաներ, փոստ-մորտեմներ
• Ճիշտ անցումներ, DA-քվոտաներ, edge-տարածություն

18) Գլոսարիա

OVR (ընդհանուր հաշվարկային ռեսուրսներ) 'էկոհամակարգի համար կարողությունների մեկ փամփուշտը։

RNFT: Պայմանագիրն «հարաբերությունն» է ռեսուրսների/սահմանափակումների իրավունքների համար։

S-տոկենը 'SLA-ի գրավը/պրովայդերի/հանգույցի պատասխանատվությունը։

R-tocen 'որակի/հուսալիության անբաժանելի հեղինակություն։

DA 'տվյալների հասանելիության շերտը (ապացույցների հրատարակումը/պահպանումը)։

Spot/Systemptible: էժան, բայց ընդհատվող ռեսուրսներ քաղաքական գործիչների հետ։

Արդյունքում, ընդհանուր հաշվարկային ռեսուրսները էկոհամակարգը վերածում են հաշվարկների հավասարակշռված գործարանի, որտեղ հեռացումը բարձր է, որակը կանխատեսելի է, խթանները հավասարեցված են, իսկ անվտանգությունն ու կոմպլենսը ներկառուցված են արձանագրության մեջ։ Ճիշտ նվագախումբը, իներցիայի տնտեսությունը թույլ են տալիս բազմաբնույթ բեռներ մեծացնել առանց արտադրողականության և վստահության կորստի։