Benchmarks Network

1) რატომ გვჭირდება ბენზინგასამართი სადგურები

ქსელის ბენზინგასამართი სადგურები არის ეკოსისტემის კვანძებს შორის საკომუნიკაციო პროდუქტიულობის და სტაბილურობის რეპროდუქციული გაზომვები: სტუდიის/RGS/გადახდების ოპერატორი/PSP/APM, KYC/AML - აფილატები/მედია, ანალიტიკა/ბროკერები CDN/edge.
მიზანია რიცხვითი გარანტიების მიღება SLO- სთვის, დაგეგმოს კონტეინერი (კაპიტალი), შეამციროს Cost-to-Serve და უსაფრთხოდ შეაფასოს კამპანიები/გამოშვებები/ტურნირები.

• პროგნოზირებადი p95/პიკის შეფერხებები პიკის ტირიფებში.
• დროული ფეილოვერი მარშრუტებზე და პროვაიდერებზე.
• ICC/გადახდებზე ზარალის შემცირება და ძაბრში „გაჟონვის“ შემცირება.
• მიმწოდებლების გამჭვირვალე შედარება SLI- ით და ფასით.

2) გაზომვის სფეროები (სკოპი)

1. L3-L4: RTT, ჯიტერი, ზარალი, გამტარუნარიანობა, ინციდენტების დროს BGP/Anycast- ის ქცევა.
2. L7/API: მოთხოვნის ლატენტობა და წარმატება (ლოგინი, ანაბარი, ფსონი, სპინი), arror კოდები, retray.
3. Striming (live-casino/WebRTC): end-to-end შეფერხება, ჩარჩოს სტაბილურობა, packet loss.
4. გადახდა/PSP/APM: ავტორიზაციის/შემოწმების დრო, წარმატებული გარიგების წილი, ჩარჯბეკის რისკი.
5. KYC/AML: გადამოწმების ხანგრძლივობა სცენარის მიხედვით, pass/fail წილი, რიგები.
6. ღონისძიების საბურავი (Kafka-sovm.) : წვეულებების ლაგი, throughput, rebalancing, E2E ღონისძიების მიწოდების დრო.
7. Keshi/BD: hit-ratio, p95 get/set, lag შენიშვნები, TPS შარდზე.
8. GSLB/DNS: საჭრელი/გადართვის დრო, გეო მარშრუტის სისწორე.
9. WAF/bot დაცვა: ლეგიტიმური ტრაფიკის გამოტოვება, ყალბი ოპერაციები, overhead.
10. დაკვირვება: ტრეისინგის სისრულე, მეტრული/ლოგების ინჟესტის შეფერხება.

3) მეტრიკა და SLO (მინიმალური ნაკრები)

• ლოგინი: p95-300-500 ms; შეცდომა 0.3% -ით.
• ანაბარი (PSP ორკესტრი): p95-1.5-2.0 წმ; წარმატება - 96-98% (APM- ის მიხედვით).
• ფსონი/უკანა: p95-150-250 ms; ტაიმაუტები 0.2%.
• მსუბუქი კაზინოს ნაკადი: E2E შეფერხება - 300-800 ms, პერსონალის დაკარგვა - 0,5%.
• მოვლენების ბროკერი: მომხმარებელთა პლაკატი p95-200-500 ms მწვერვალის დატვირთვით; მიწოდების 99.9% -ით.
• Kesh/BD: p95 get - 2-5 ms (Redis), p95 SQL ჩანაწერი და 10-30 ms თითო shard.
• GSLB/Anycast: რეგიონის გადართვა - 30-90 წმ, რეზინის შეცდომა - 0.01%.
• WAF/bot ფილტრი: false positive წილი 0,1% სამიზნე ნიმუშზე.
• დაკვირვება: ტრეისი-შეფერხება - კრიტიკული ბილიკებისთვის 95%, მეტრული შეფერხება - 5.

4) დატვირთვის პროფილები (Workload Mix)

• ფანჯრის/შინაარსის კითხვების 60%, თამაშის მოქმედებების 30% (ფსონი/სპინი), 8% გადახდა, 2% KYC.

• + 2-3 × RPS კურსი/უკანა; + 1.5 × გადახდა; ვებ სოკეტების ზრდა.

• + 3-5 × განაკვეთის მოთხოვნა 15-30 წუთის განმავლობაში., კოეფიციენტების შეფუთვა/ღალატი.

• გადახდების/დასკვნების მოკლე, მაგრამ მკვეთრი ზრდა; ანტიფროდის შემოწმება.

თითოეულ პროფილს უნდა ჰქონდეს სტენდი: არათანაბარი „ეკლები“, პაუზები, განმეორებითი მცდელობები, ვიდეო ჩარჩოები.

5) ბენჩმარკინგის მეთოდოლოგია

5. 1 პრინციპები

რეპროდუქცია: IaC- ში სტენდის კონფიგურაცია, ვერსიების დაფიქსირება.
ექსპერიმენტის სიწმინდე: იზოლაცია ფონის ჯობ/ბეკაპებისგან, სტაბილური თესვის ნაკრები.
დაკვირვება: trace-id- ის გავლით, მეტრიკის L3-L7 კორელაცია.
ხელახალი კონტროლი: ლიმიტები/ჯიტერი, იდემპოტენტობა - წინააღმდეგ შემთხვევაში, „ქარიშხალი“ ამახინჯებს შედეგებს.
ორფაზიანი გაზომვები: ცივი დასაწყისი (კეშის დათბობა) და დათბობა.

5. 2 სტენდი (ტოპოლოგია)

გლობალური: Anycast DNS + GSLB - რეგიონალური PoP-L4/L7 ბალანსი - თვის მომსახურება.
რეგიონალური: spine-leaf fabric, ingress/WAF, ბროკერი, ქეშის დონე, BD საშინელებები.
მოვაჭრე მარყუჟები: სწორი VPN/წმ. PSP/KYC/პროვაიდერების პირინგები.
Chaos კონტური: კონტროლირებადი fault ინექციები (შეფერხებები, კონექტორების გამონადენი, AZ ვარდნა).

5. 3 ინსტრუმენტები (კლასების მაგალითები)

გენერატორები: HTTP/gRPC დატვირთვა, WebSocket/WebRTC ემულატორები, გადახდის/KUS ემულატორები, Kafka მწარმოებლები/კონსუტერები.
Sniffers და პროფილაქტიკოსები: eBPF ტესტები, pcap, CPU/alloc პროფილირება, ტრეკები.
მონიტორინგი: დროის სერია, ლოგოები, ტრეისი, შეცდომების ბიუჯეტის ალერტები.
(კონკრეტული პროდუქტები შეირჩევა თქვენი დასტის მიხედვით).

6) ტესტების ნაკრები (კატალოგი)

6. 1 L3–L4

RTT/ჯიტერი/ზარალი რეგიონებსა და გამყიდველებს შორის.
BGP/Anycast falylover: პრეფიქსი გადაადგილების დრო, ბილიკის დეგრადაცია.

6. 2 L7/API

Login/Authorize/Token Refresh ადიდებულმა.
Bet/Spin Idempotence: განმეორებითი მოთხოვნები კლავიშებით, დაცვა დუბლებისგან.
Wallet/Balance Consistence: კონკურენტული ჩანაწერები, სერიის შემოწმება.

6. 3 ნაკადი/WebRTC

Media path latency packet loss 0.1-1%, bitrate- ის შეცვლა, PoP- ის შეცვლა.
Viewer fan-out: SFU/CDN ფენების მასშტაბები.

6. 4 გადახდა

Checkout 3-DS: პიკის ავტორიზაცია, PSP კვანძის დაცემა, fallback მარშრუტი.
ანტიფროდიული ჩანართი: გადაწყვეტილების შეფერხება, false positive/negative.

6. 5 KYC/AML

დოქტორანტი და სანქცია: SLA პასუხზე, რიგებზე, დეგრადაციაზე „მანკიერ მიმოხილვამდე“.

6. 6 მოვლენები/ბროკერი

Throughput & Lag: პარტიების ზრდა, რევალანსი, კონსიუმერების ჩამორჩენა.
Exactly-once ბიზნეს მნიშვნელობებისთვის: დედუპლიკაცია, განმეორებითი მიწოდება.

6. 7 კეში/BD

Hit-ratio დეგრადაცია: გავლენა p95 API- ზე, warm-up სტრატეგიაზე.
Sharding/რეპლიკები: failover, Read- ის შეფერხება, write-amplification.

6. 8 უსაფრთხოება/WAF

Bot-mix: სკრიპტის/კლიკის ფროიდის სკრიპტებისგან დაცვა კონვერტაციის გარეშე.

7) სტატისტიკა და მოხსენებები

განაწილების მეტრიკა: p50/p90/p95/p99, MAD/gitter, ნდობის ინტერვალები.
კორელაციები: ჩვენ დავუკავშირდებით L3 (RTT/ზარალს) L7- ს (ლატენტობა API), გადახდის კონვერტაციას SLI PSP- სთან.
რეგრესიები/ბეისლაინები: შეადარეთ გამოშვებები/კონფიგურაცია A/B, ჩვენ ვაშენებთ რეგრესიულ გრაფიკებს.
ინციდენტების სემანტიკა: ჭდეები „პროვაიდერი/რეგიონი/AZ/ვერსია/WAF წესი“.
ანგარიშის ფორმატი: 1) სტენდი/მიქსი; 2) SLO vs ფაქტი; 3) ვიწრო ადგილები; 4) რეკომენდაციები; 5) ეკონომიკის გავლენა.

8) პროვაიდერების ბენჩეკები (შედარება და რანჟირება)

• SLI: აფთიაქი, p95 პასუხი, შეცდომების წილი, სტაბილურობა x3/x5 დატვირთვაზე.
• DR მზადყოფნა: ნაკრძალის დრო, ჭუჭყიანი-ლიმიტის/კვოტების/რეპტარების არსებობა.
• იურიდიკა: გეო შეზღუდვები, მონაცემთა შენახვა, DPIA.
• ეკონომიკა: გარიგების ფასი/1000 მოვლენა/ვიდეო წუთი, ჯარიმა/სესხი.
• საბოლოო მაჩვენებელი: დაბალანსებული შეფასება სამიზნე ბაზრებისთვის.

9) კავშირი ეკონომიკასთან (Cost-to-Serve)

• Cost per rps (API, ბროკერი), Cost per txn (გადახდა/KUS), Cost per stream (bitrate × my).
• ზღვარი: როგორ მოქმედებს p95/შეცდომები კონვერსიაზე (FTD, ანაბარი, განაკვეთი) - GGR.
• Capacity budget: რამდენი RoP/კვანძი არის საჭირო სამიზნე პიკის კოეფიციენტისთვის.
• ოპტიმიზაციის რეკომენდაციები: სად არის იაფი - გაზარდოს ქეში/წვეულებები/RoP ან შეცვალოს მარშრუტი.

10) შესაბამისობა, უსაფრთხოება და კონფიდენციალურობა

PII მინიმიზაცია: იდენტიფიკატორების ტოქსიკაცია ბენჩებში, ცალკეული სტორაჟები.
DPA/DPIA: ტესტის მიზნები, შენახვის ვადა, არტეფაქტების ამოღება.
Zero Trust: mTLS, JWS/HMAC ხელმოწერა, პროდუქტებისგან სტენდების იზოლაცია.
RG ასპექტები: სკრიპტები, რომლებიც გამორიცხავს დაუცველი ჯგუფების სტიმულირებას (მხოლოდ ტექნიკოსი). მეტრიკა).

11) ანტი შაბლონები

ბენჩი რეაგირების/idempotent- ის გარეშე - შედეგები „უკეთესია, ვიდრე ცხოვრება“.
პროდ და სტენდის ნაზავი, ცოცხალი PDN ტესტი.
ტესტებში ერთადერთი მარშრუტი/პროვაიდერი (SPOF არ არის გამოვლენილი).
„საშუალო“ მეტრიკა კუდის გარეშე (არა p95/p99).
სტენდი დაკვირვებისა და ვაჭრობის გარეშე <80%.
ადგილობრივი ტესტი გლობალური გეოგრაფიისა და GSLB- ის გარეშე.

12) ბენჩის გაშვების ჩეკის სია

1. მიზნები და SLO: კრიტიკული გარიგებების სია და მიზნობრივი ბარიერები.
2. დატვირთვის სტრატეგია: პროფილები Baseline/Peak/Final/Payday.
3. სტენდი და IaC: რეგიონები, PoP, მარშრუტები, ვერსიები, სავარძლები.
4. დაკვირვება: ტრეისი/მეტრიკა/ლოგები, ომის ოთახი, შეცდომების ბიუჯეტის ალერტები.
5. უსაფრთხოება: ტოკენიზაცია, mTLS, vendor ზონების იზოლაცია.
6. DR სცენარები: Faylover GSLB/BGP, AZ/PSP/KYC/პროვაიდერი.
7. ეკონომიკა: Cost-to-Serve ცხრილი და ანაზღაურებადი ბარიერები.
8. მოხსენებები: შაბლონი, ვადები, მფლობელები და RACI.

13) ანგარიშის შაბლონი (1 გვერდი)

კონტექსტი: მიზანი, თარიღი, სტენდი, რეგიონები.
დატვირთვის მიქსი: ოპერაციების წილები, ფაზების ხანგრძლივობა.
SLO- ს შედეგები: სამიზნე ფაქტი, წითელი ზონები.
Root Causes: ტოპ 3 ვიწრო ადგილი (ქსელი/გამოყენებითი/ვენდორი).
რეკომენდაციები: სწრაფი ფიქსაცია (0-7 დღე), საშუალო (30 დღე), სტრატეგიული (> 30 დღე).
ეკონომიკის ეფექტი: uplifta FTD/ARPU/LTV პროგნოზი და Cost-to-Serve- ის შემცირება.
გეგმა DR/Chaos: რა არის გადამოწმებული და როდის ხდება შემდეგი პროგონი.

14) ბენჩმარკინგის ევოლუციის გზის რუკა

v1 (ფონდი): სახელმძღვანელო საყრდენები, ძირითადი პროფილები, SLO სია.
v2 (Automation): nightly/weekly გადასასვლელი, automation, guardrails გამოშვებისთვის.
v3 (Adaptive): SLI ტრაფიკის ტრაფიკი, პრედიკატური ალერტები, სინთეტიკა რეალობასთან უფრო ახლოს.
v4 (ქსელის მთავრობა): ჯვარედინი პარტნიორობა, საერთო მეტრიკა და ჯარიმა/სესხი SLA- სთვის.

მოკლე რეზიუმე

ქსელის ბენზინგასამართი სადგურები არ არის „ერთჯერადი გაზომვა“, არამედ მუდმივი დისციპლინა, რომელიც აკავშირებს პარტნიორების SLA, SLO პროდუქტს და ეკონომიკას. სტანდარტიზებული დატვირთვის პროფილები, გაზომეთ p95/p99 კრიტიკულ გარიგებებზე, შეამოწმეთ ფეილოვერები და ქაოსი სცენარები, გაითვალისწინეთ Cost-to-Serve - და თქვენი ეკოსისტემა პროგნოზირებადი იქნება თუნდაც მსოფლიო მწვერვალების დღეებში.