Kenar düzeyinde analiz

1) Kenar analizleri nelerdir ve neden

Kenar analizi - gecikme, ağ yükü, iletim maliyeti ve gizlilik risklerini azaltmak için veri kaynağına (cihaz, şube, PoP, kookasyon) mümkün olduğunca yakın işleme, toplama ve karar verme.

• Milisaniye çözümleri (gecikme ve yerel SLA).
• Daha az giden trafik ve bulut maliyetleri.
• Zayıf iletişim durumunda kararlılık (çevrimdışı mod).
• Yerel veri gizliliği/yerelleştirme.

2) Tipik durumlar

Gerçek zamanlı operasyonel yanıtlar: anomali tespiti, güvenlik eşikleri, ödeme/terminalde dolandırıcılık önleme, ekipman SLA kontrolü.
Yerel KPI'lar ve uyarılar: p95 gecikmeleri, yük, dönüşüm on-prem, vardiya ile nakit gelir.
Telemetri filtreleme/zenginleştirme: normalleştirme, veri tekilleştirme, buluta göndermeden önce anonimleştirme.
Kenar önerileri/NBA: ham PII aktarmadan kullanıcıya/operatöre kişisel ipuçları.
Olay arabelleğe alma ve akıllı senkronizasyon - ağ kararsız olduğunda.

3) Mimari genel bakış (katmanlar)

1. Cihaz/Kaynak: sensörler, POS, istemci SDK, günlük ajanları.
2. Edge Runtime: Mesaj Aracısı (MQTT/NATS/Kafka Edge), Akış Motoru (Flink/Spark Structured Streaming/Lightweight CEP), Yerel KV/TSDB.
3. Analitik hizmetleri: modeller (çevrimiçi puanlama), kurallar/eşikler, yerel KPI vitrinleri, önbellek.
4. Senkronizasyon/Ağ Geçidi: senkronizasyon proxy/aracı, şifreli aplink kuyruğu, bant genişliği kontrolü.
5. Bulut/Çekirdek: toplama, uzun süreli depolama, global vitrinler, model eğitimi, parametre federasyonu.
6. Yönetim: OTA güncellemeleri, özellik bayrakları, telemetri, denetim.

İlke:'ince bulut - akıllı kenar ": yerel olarak kritik çözümler, ağır çevrimdışı anlatımlar ve uzun vadeli vitrinler - bulutta.

4) Veri tasarımı ve protokolleri

Formatlar: Kompakt (Protobuf/Avro/CBOR); Şemalar sürümlüdür (SemVer), 'SELECT' yasaktır.
Anahtarlar ve zaman: 'event _ time' + 'ingested _ at', veri tekilleştirme için monoton dizi kimliği.
Sıkıştırma/şifreleme: LZ4/Zstd; TLS 1. 3; Disk üzerinde - AES-GCM.
Taşıma: Kısa mesajlar için MQTT/NATS/GRPC; HTTPS/GRPC, aplink üzerinde toplanır.
Sözleşmeler: Tazelik/bütünlük/aralık kuralları, sevkiyattan önce kenarda uygulanır.

5) Kenarda akış

CEP/pencere toplama: yuvarlanma/kayma/oturum, filigranlar; Tolerans gecikmesi.
'Event _ id', zaman pencereleri ve imzalarla veri tekilleştirme.
Çevrimiçi zenginleştirme: TTL ve sürüm ile yerel dizinler/özellikler (LRU önbellek).
Anomaliler: sağlam z-skoru/ESD, bellek kaydetmek için eskizler (count-min, HyperLogLog).
Fallback: kaynak eksikliği ile - frekans azaltma ve kaba agregalar.

6) Kenardaki modeller: varyantlar ve yaşam döngüsü

Ağır bulut eğitimi; Kenar puanlama (LightGBM/XGBoost/ONNX/TF-Lite).
Federated Training (FL) - Ham veri aktarımı olmadan yerel ölçekli güncelleme - merkez toplama (FedAvg/FedProx).
Sürüklenme kontrolü: Özelliklerin dağılımını izlemek, tutarsızlıklar için "güvenli mod'u etkinleştirmek.
Sürüm oluşturma: model kaydı, kanarya hesaplamaları ve otomatik geri alma (bir düğüm kümesi üzerinde A/B).

7) Kenar vitrinleri ve önbellek

Hafif depolama: Yerel KPI'lar ve kuyruklar için RocksDB/SQLite/Badger.
TTL ve GC: yaş politikaları, boyut sınırı.
Anlık görüntüler: periyodik kontrol noktaları, atomik güncellemeler.
Materyalizasyonlar: Cihazdaki UI/paneller için hızlı roll-up tablolar.

8) Çevrimdışı istikrar ve senkronizasyon

Olay günlüğü (WAL) teslim notları ile kenarında.
Çevrimdışı mod: yerel çözümler devam ediyor; Uyarılar - yerel kanallara.
Kurtarma sırasında senkronizasyon: aplink başına geri basınç, kritik akışların önceliklendirilmesi, hash/seq-id dedup, özetlenmiş indirmeler.
Tutarlılık: kenar ve bulut arasında nihai; "Doğru" - uzlaştırıcı işlerle bulutta.

9) Güvenlik, gizlilik, erişim

Kenardaki RLS/CLS: Göndermeden önce PII maskeleme; Varsayılan gizlilik politikaları.
Anahtarlar ve sırlar: donanıma güvenilen modüller (TPM/SE), döndürme, karşılıklı TLS.
Sıfır güven: minimum haklar, kısa belirteçler, cihaz/konum bağlama.
Denetim ve adli tıp: Değişmez denetim günlükleri, zaman damgası (NTP/PTP).

10) Yönetim ve Güncellemeler (OTA)

Artifaktların toplu teslimatı: konteynerler/paketler (OCI), diff güncellemeleri.
Özellik bayrakları: serbest bırakmadan kuralları/modelleri/eşikleri etkinleştirin.
Kanarya/Mavi-Yeşil: düğümlerin bazıları yeni bir sürüm alır; Geri alma hakkında metrikler karar verir.
Pencere politikası: güncellemeler - düşük trafikte; Pil/CPU/IO izleme.

11) Gözlemlenebilirlik ve SLO

Yerel metrikler: gecikme/verim, kuyruk derinliği, düşme hızı, CPU/IO/termal sınırlar.
Veri kalitesi: Kenardaki ve buluttaki tazelik/eksiksizlik/benzersizlik.
SLO: p95 yerel puanlama/uyarı, MTTR-senkronizasyon, yüzde çevrimdışı zaman.
Telemetri: Göndermeden önce örnekleme/toplama, telemetri DDoS'a karşı koruma.

12) Performans ve maliyet

Kaynak bütçesi: CPU/RAM/IO üzerinde sabit limitler; zarif bir bozulma.
Maliyet farkında senkronizasyon: toplu gönderme, sıkıştırma, yoğun olmayan pencereler.
Donanım seçimi: ARM/x86, hızlandırıcılar (NPU/TPU/Intel NPU), enerji profili.
Profil oluşturma: IO, sıcak yolları, pencere boyutunu ve sıklığını engeller.

13) Test ve öykünme

Düğüm emülatörleri ve yük profilleri: ağ gecikmeleri, paket kaybı, sensör sürüklenmesi.
Altın kitler: CEP/agregalar için referans standartları; deterministik tarafları.
Kaos kenarı: ani yeniden başlatmalar, eksik disk/ağ arayüzü.
Sözleşme testleri: OTA'da şemaların/protokollerin uyumluluğu.

14) Çok konumlu ve federasyon

Hiyerarşi: Aygıt> yerel ağ geçidi> bölgesel merkez - bulut.
Yerel kurallar: Yargı yetkisine göre farklılıklar (depolama yerelleştirmesi, GDPR durakları).
Birleştirilmiş toplamlar: ham veri içermeyen bölgelere göre toplamlar.

15) UX ve entegrasyonlar

Kenar paneller: çevrimdışı erişim, erişilebilirlik (kontrast/klavye), hızlı eylemler.
Yerleşik analitik: Yerinde operatörler/iş ortakları için widget'lar.
Entegrasyonlar: site sistemlerine yerel API'ler/webhook'lar (SCADA, cash desk, CRM).

16) Antipatterns

"Kontrolsüz kalın kenar": OTA/gözlemlenebilirlik içermeyen karmaşık boru hatları.
Sınırda canlı öğrenme: dengesiz ve pahalı; Bulutta öğrenmeye devam et.
Bulut ile katı bağlantı: aplinka'nın düşüşü çözümleri kırar.
Ham PII dışa doğru: yerel anonimleştirme/maske yok.
Doğrulanmamış şemalar/modeller: senkronizasyon dışı ve sessiz hatalar.
Hesaplanmamış termal/enerji yükü: kısma ve bozulma.

17) Uygulama Yol Haritası

1. Keşif: olay/çözüm haritası, SLO, kaynak ve iletişim kısıtlamaları, gizlilik riskleri.
2. MVP: ışık komisyoncusu + CEP pencereleri + yerel uyarılar; Çevrimdışı kuyruk ve temel senkronizasyon.
3. Ölçek: ONNX/TF-Lite'daki modeller, önbellek özelliği, ağırlık federasyonu, iş parçacığı önceliklendirmesi.
4. Sertleştirme: OTA/özellik bayrakları, sıfır güven, denetim, kaos kenarı, bölgesel politikalar.
5. Optimizasyon: maliyet-duyarlı senkronizasyon, telemetri örnekleme, hot-track profilleme.

18) Yayın öncesi kontrol listesi

• Şemalar/sözleşmeler sürümlü, geriye dönük uyumlu, 'SELECT' izin verilmez.
• Kanal ve disk şifreleme, kısa belirteçler, cihaz bağlama.
• Yerel DQ kuralları ve dedup etkinleştirilmiştir; Çevrimdışı kuyruk test edildi.
• Kenar çalışma zamanı modelleri; Sürüklenme izleme ve otomatik geri alma.
• OTA/özellik bayrakları çalışması; Bir kanarya/mavi-yeşil ve bir geri dönüş planı var.
• SLO metrikleri toplanır; p95 gecikme ve MTTR-senkronizasyon uyarıları.
• Maliyet profili ölçüldü; Sıkıştırma/butching/off-peak etkinleştirildi.
• Operatör belgeleri: çalışma kitapları, ağ/güç diyagramları, sınırlar ve gizlilik politikaları.

19) Mini ilke şablonları (sözde YAML)

Senkronizasyon ve öncelik politikası

yaml sync:
batch_size_events: 500 max_interval_s: 30 compress: zstd priorities:
- topic: "alerts. gold"; qos: high; retry_backoff_s: [2, 10, 60]
- topic: "metrics. silver"; qos: med; retry_backoff_s: [10, 60, 300]
- topic: "logs. bronze"; qos: low; offpeak_only: true

Yerel SLA tarafından kenar uyarısı

yaml rule: "p95_latency_ms > 1500 for 5m"
action:
- degrade_mode: "coarse_aggregates"
- notify: "local_dashboard"
- tag_sync: "priority_boost"

Alt satır: Kenar seviyesi analitiği "kırpılmış bulut BI'değil, kendi SLO, güvenlik, OTA yönetimi ve ekonomisi ile bağımsız bir çözüm döngüsüdür. Yerel işleme, çevrimdışı esneklik, model federasyonu ve gözlemlenebilirlik birlikte çalıştığında, organizasyon olayların gerçekleştiği yerde hızlı, özel ve öngörülebilir çözümler alır.