Գրացիզոզային դեգրադացիա

1) Մոտեցման էությունը

Գրացիոնալ դեգրադացիան համակարգի կառավարվող անցումն է ավելի պարզ, բայց օգտակար ռեժիմ է ռեսուրսների պակասի, կախվածության կամ բեռի պիկի պատճառով։ Նպատակը օգտագործողի համար արժեքի միջուկը պահպանելն է և պլատֆորմի կայունությունը, նվիրաբերելով երկրորդական հնարավորություններ և որակներ։

Հիմնական հատկությունները

Կանխատեսելիությունը 'նախապես որոշակի սցենարներ և «աստիճաններ» քայքայման համար։

Պարտության շառավղի սահմանափակումը 'ֆիչի և կախվածության մեկուսացումը։

Դիտարկումը 'չափումներ, լույսեր և հետքեր «որո՞ նք են դեգրադացիայի մակարդակը և ինչու»։

Ուղեղն այն է, որ արագ կարգավորումը նորմալ է։

2) Սկզբունքներն ու սահմանները

1. Պահպանել ամենակարևորը 'իր հիմնական SLA/SLO (օրինակ ՝ «գնումը», «լոգինը», «որոնումը») գերակայությունն է երկրորդական (ավատարներ, առաջարկություններ, անիմացիաներ)։

• Անվտանգությունը, վճարումները, իրավունքները 'fail-closed (ավելի լավ է հրաժարվել, քան խախտումը)։
• Քեշիրացված բովանդակություն, հուշումներ, ավատարներ - fail-open ֆոլբեքի հետ։
• 3. Ժամանակավոր բյուջեներ 'թայմաուտներ վերևից ներքև (հաճախորդ <դարպաս <ծառայություն)։ Ըստ օրենսդրության ՝ գետերի փոխարեն քայքայումը մինչև անսահման է։
• 4. Արժեքի վերահսկումը 'դեգրադացիան պետք է նվազեցնի CPU/IO/ցանցի սպառումը, և ոչ թե պարզապես «թաքցնել» սխալները։

3) Քայքայման մակարդակները

3. 1 Հաճախորդ/UX

Skeletons/plaisholders-ը և «ծույլ» բեռնումը երկրորդական vijetes։

Partial UI 'կրիտիկական բլոկները բեռնվում են, երկրորդային բլոկները թաքնվում են/պարզեցված։

Քեշը հաճախորդի կողմում 'last-known-good (LKG) նշանով «տվյալները կարող էին հնացած լինել»։

Օֆլայնի ռեժիմը 'թիմերի հերթը խոհարարի հետ ավելի ուշ (գաղափարախոսություն)։

3. 2 Edge/CDN/WAF/API դարպաս

stale-while-revalidate: Մենք տալիս ենք քեշ, ֆոն նորարարություն։

Rate limiting & load shedding: բեռնման ժամանակ մենք իջեցնում ենք ֆոնային/անանուն։

Geofence/կշռված routing: Windows-ը տեղափոխվում է մոտակա առողջ տարածք։

3. 3 Ծառայողական շերտ

Partial response: Մենք վերադարձնում ենք տվյալների մի մասը + «warnings»։

Read-only ռեժիմը 'ռուսական մուտացիաների արգելք (դրոշներ)։

Brownout: ժամանակավոր անջատումը ռուսական սոեմական ֆիչի (առաջարկություններ, հարստացում)։

Adaptive concurrency: Դինամիկորեն նվազեցնում ենք զուգահեռականությունը։

3. 4 Տվյալներ/սթրիմինգ

Քեշը որպես TTL-ի ճշմարտության աղբյուրը (ժամանակավորապես). <<ավելի լավ է մոտ, քան ոչինչ>>։

Մոդելների/ալգորիթմների նվազեցված ճշգրտությունը (fox path vs acurate path)։

Winder/queue 'ծանր առաջադրանքների տեղափոխումը ֆոն (www.box/job queue)։

Առաջնահերթությունները 'կրիտիկական իրադարձությունները' առանձին դասարանում։

4) «Սանդուղքները» քայքայման (playbooks)

API-ի որոնման օրինակ

L0 (նորմա) wwww.L1: թաքցնել նիշալիզացիան և Banners ww.L2: Անջատել հոմանիշները/www.L3: սահմանափակել պատասխանը և timaut-ը մինչև 300 ms L4: Տալ 5 րոպեի արդյունքները: «read-only & cached only» + հարցումների հերթը։

Յուրաքանչյուր մակարդակի համար գրանցվում են

Ձգողականներ 'CPU> 85% r95> 105, սխալներ> շեմն, Kafka> շեմն, կախվածության ֆայլ։

Գործողությունները 'ներառել X դրոշը, նվազեցնել concurrency-ը, անցնել Y աղբյուրը քեշի վրա։

Ելքի չափանիշները '10 րոպե կանաչ մետրիկ, ռեսուրսների պահուստ։

5) Որոշումների կայացման քաղաքականությունը

5. 1 Սխալ բյուջե և SLO

Օգտագործեք error-budget burn rate որպես brownout/գլուխդինգ։

Քաղաքականությունը. <<Եթե burn-rate> 4-ը 15 րոպեի ընթացքում ներառել L2 դեգրադացիա>։

5. 2 Admission control

Մենք սահմանափակում ենք RPS-ը կրիտիկական ճանապարհների վրա, որպեսզի ապահովենք p99-ը և կանխենք հերթերի փլուզումը։

5. 3 Առաջնահերթություն

Դասարաններ ՝ interactive> 07> background։

Ռուսական տենանտ գերակայությունները (Gold/Silver/Bultze) և արդարությունը (fox)։

6) Patterns և իրականացում

6. 1 Load shedding (սերվերային)

Խնայիր հարցումները նախքան բոլոր ռեսուրսները վերցնելը։

Վերադարձեք '429 '/' 503' «Retry-After» և բացատրություն քաղաքականության համար (հաճախորդների համար)։

Envoy (adaptive concurrency + circuit breaking)

yaml typed_extension_protocol_options:
envoy. filters. http. adaptive_concurrency:
"@type": type. googleapis. com/envoy. extensions. filters. http. adaptive_concurrency. v3. AdaptiveConcurrency gradient_controller_config:
sample_aggregate_percentile: 90 circuit_breakers:
thresholds:
- max_requests: 2000 max_pending_requests: 500 max_connections: 1000

6. 2 Brownout (ժամանակավոր պարզեցում)

Գաղափարը 'նվազեցնել «պայծառությունը» (արժեքը) ֆիչ, երբ ռեսուրսները արդյունքի վրա են։

kotlin class Brownout(val level: Int) { // 0..3 fun recommendationsEnabled() = level < 2 fun imagesQuality() = if (level >= 2) "low" else "high"
fun timeoutMs() = if (level >= 1) 150 else 300
}

6. 3 Partial response և զգուշացումներ

«Warnings »/« degradation» դաշտը պատասխանում է

json
{
"items": [...],
"degradation": {
"level": 2,
"applied": ["cache_only", "no_personalization"],
"expiresAt": "2025-10-31T14:20:00Z"
}
}

6. 4 Stale-while-revalidate եզրին (Nginx)

nginx proxy_cache_valid 200 10m;
proxy_cache_use_stale error timeout http_500 http_502 http_504 updating;
proxy_cache_background_update on;

6. 5 Read-only անջատիչ (Kubernetes + դրոշը)

yaml apiVersion: v1 kind: ConfigMap data:
MODE: "read_only"

The code should check MODE and block mutations with a friendly message.

6. 6 Kafka: backpressure և հերթերի դասարաններ

Անցեք heavy-condumer-ը ավելի փոքր 'max-ում։ poll. records ', սահմանափակեք արտադրողական batch-2019-ը։

Կիսեք «քննադատական» և «bulk» իրադարձությունները տոպիկների/քվոտաների վրա։

6. 7 UI: graceful fallback

Թաքցրեք «ծանր» տեսիլքները, ցույց տվեք քեշ/կմախք և հստակ նշեք հնացած տվյալները։

7) Միգրացիոն օրինակներ

7. 1 Istio: www.ier + pula գերակայություն

yaml outlierDetection:
consecutive5xx: 5 interval: 10s baseEjectionTime: 30s maxEjectionPercent: 50

7. 2 Nginx: Ֆոնային լուծույթ դանակի տակ առաջինը

nginx map $http_x_priority $bucket { default low; high high; }

limit_req_zone $binary_remote_addr zone=perip:10m rate=20r/s;
limit_req_status 429;

server {
location /api/critical/ { limit_req zone=perip burst=40 nodelay; }
location /api/background/ {
limit_req zone = perip burst = 5 nodelay; # stricter
}
}

7. 3 Feature flags / kill-switches

Պահպանեք դինամիկ կազմաձևում (CorigMap/Consul), նորարարություն առանց թողարկման։

Բաժանեք ֆիչին և գլոբալ դրոշները, տրամաբանեք ակտիվացումը։

8) Դիտողականությունը

8. 1 Մետրիկա

«degradation _ level _ codice» - ներկա մակարդակն է։

«shed _ reques.ru _ total _ rope, reason _» - որքա՞ ն է նետվում և ինչու։

«stale _ responses _ total» - քեշը։

`read_only_mode_seconds_total`.
`brownout_activations_total{feature}`.

Սխալ բյուջեն 'burn-rate, SLO խախտումների մասը։

8. 2 Թրեյսինգ

Սպանների ատրիբուտները ՝ «degraded = ww.d.», «level = 2», «reason = upstream _ timeout»։

Գետերի/hedged պահանջների միջև ոսպնյակները տեսնելու համար։

8. 3 Logs/alerta

Դեգրադացիայի մակարդակների փոխակերպման իրադարձությունները պատճառների և փոխակերպման սեփականատիրոջ հետ։

Ալերտները մակարդակի «կպչուն» վրա (դեգրադացիան երկար է)։

9) Ռիսկերի և անվտանգության կառավարումը

Մի ապաքրեականացրեք/հեղինակային իրավունքի/տվյալների ամբողջականությունը 'ավելի լավ է մերժումը։

PII դիմակավորում պահպանվում է ցանկացած ռեժիմում։

Ֆինանսներ/վճարումներ 'միայն idempotent վիրահատություններ, խիստ թայմաուտներ և արձագանքներ։ կասկածների դեպքում 'read-only/hold։

10) Anti-patternes

Հանգիստ քայքայումը առանց օգտագործողի և առանց հեռաչափության։

Ռետրայի փոթորիկները load shedding-ի և կարճ թայմաուտների փոխարեն։

Համաշխարհային «ռուբիլնիկները» առանց սեգմենտացիայի հսկայական blast radius է։

Փաթեթների խառնուրդը և «թեթևացած» ճանապարհները մեկ հերթում/հերթում։

Հավիտենական քայքայումը 'brownout որպես «նոր նորմ», մոռացված ելքի չափանիշները։

Stale-write: Փորձեր գրել հնացած տվյալների հիմքում։

11) Ներդրման չեկի ցուցակ

• Որոշեք արժեքի միջուկը և քննադատական օգտագործողի սցենարները։
• Կազմված են ծառայությունների/դոգմաների դեգրադացիայի աստիճաններով 'ձգաններով և ելքերով։
• Ներդրվել են թայմաուտներ/սահմանափակումներ և server-side load shedding։
• Տրամադրված են rate limits-ը և առաջնային դասարանները։
• Իրականացվել է partial response, read-only, stale-wile-revalidate։
• Ինտեգրված են feature flags/kill-switches աուդիտի հետ։
• Metriki/treising/alerts քայքայման և պատճառների մակարդակների համար։
• Disgame day ուսուցումները վերափոխման/ձախողումների սիմուլյացիայի հետ։
• Փաստաթղթավորված SLO և error-budget քաղաքականությունը դեգրադացիա է։

12) FAQ

Q 'Ե՞ րբ ընտրել brownout, իսկ ե՞ րբ' shedding։

Ա 'Եթե նպատակն է նվազեցնել հարցումների արժեքը առանց ձախողումների' brownout։ Եթե նպատակն է պաշտպանել համակարգը, երբ նույնիսկ պարզեցումը չի օգնում մուտք գործել։

Q 'Արդյո՞ ք օգտագործողը հայտնել է քայքայման մասին։

Ա 'Քննադատական կոմպոզիցիաների համար այո (բեյջ «սահմանափակ ռեժիմ»)։ Թափանցիկությունը նվազեցնում է աջակցությունը և դժգոհությունը։

Q 'Հնարավո՞ ր է արդյոք քեշը ճշմարտության աղբյուր դարձնել։

A 'Ժամանակավորապես, այո, ակնհայտ SLA-ի և հնացած գծերի դեպքում։ Մուտացիաների համար արգելված է։

Q 'Ինչպե՞ ս «կոտրվել» ռեթրատի համար։

A 'Կարճ թայմաուտներ, էքսպոնենցիալ backoff ջիթթերի, կուռքերի և փորձերի սահմանափակում։ միայն անվտանգ վիրահատություններ է ծախսում։

13) Արդյունքները

Գրացիոնալ դեգրադացիան ճարտարապետական պայմանագիր է և կառավարման ռեժիմների մի շարք, որոնք միացված են մետրի և սխալ բյուջեի ազդանշաններով։ Ճիշտ նախագծված աստիճանները, խիստ թայմաուտները և գլուխգործոցները, քեշ ֆոլբեքները և brownout-ը, գումարած հզոր դիտարկումը, և ձեր պլատֆորմը մնում է օգտակար և տնտեսապես նույնիսկ փոթորկի մեջ։