Операциялар және басқару → Бизнес процестерінің үздіксіздігі

Бизнес-процестердің үздіксіздігі (BCP)

1) BCP дегеніміз не және ол не үшін қажет

BCP (Business Continuity Planning) - бұл кез келген іркілістер кезінде бизнес-процестердің тұрақтылығын қамтамасыз етудің жүйелі тәсілі: дата-орталықтан бас тартудан провайдердің дағдарысына дейін, деректердің жылыстауы немесе жүктеменің кенеттен өсуі.
Жоғары жүктемелі өнімдерде (iGaming, финтех, маркетплейстер) бұл тек инфрақұрылым туралы ғана емес - бұл сенімді сақтау, реттеуші міндеттемелерді сақтау және түсімді қорғау туралы.

• Сындарлы сервистер мен деректердің қолжетімділігін сақтау.
• Қалпына келтіру уақытын (RTO) және деректерді жоғалтуды (RPO) барынша азайту.
• Дағдарыста командалардың, коммуникациялардың және сыртқы әріптестердің жұмыс қабілеттілігін қамтамасыз ету.
• Персоналдың реакциясын стандарттау және оқыту.

2) BCP негізгі компоненттері

1. BIA (Business Impact Analysis) - процестер мен бизнеске бас тартудың әсерін бағалау.
2. Тәуекелдер мен сценарийлер - қатерлер матрицасы (инфрақұрылымдық, сыртқы, адами).
3. RTO/RPO мақсаттары - қалпына келтірудің және жол берілетін шығындардың нысаналы мәндері.
4. Қалпына келтіру жоспары (DRP) - жүйелер мен процестерді қайта іске қосу бойынша егжей-тегжейлі қадамдар.
5. Коммуникация - ішкі және сыртқы арналар, хабарламалар үлгілері.
6. Тестілеу және ревизия - тұрақты тексерулер, оқу-жаттығулар, пост-талдау.
7. Нұсқаларды құжаттандыру және бақылау - орталықтандырылған қолжетімділік және өзектілік.

3) Әсерді талдау (BIA)

BIA қандай процестердің қиын екенін және оларды қаншалықты тез қалпына келтіру керектігін анықтайды.

1. Барлық бизнес-процестердің тізбесі (Payments, Bets, Games, KYC, Support).

2. Тәуелділікті анықтау (сервистер, деректер, провайдерлер, қызметкерлер).

3. Бас тартудың әсерін бағалау: қаржылық, заңдық, беделді, операциялық.

4. Әрбір процесс үшін RTO/RPO орнату.

5. Басымдық: «Must Have», «Should Have», «Nice to Have».

4) Тәуекелдер матрицасы

5) RTO, RPO және сындылық деңгейлері

RTO (Recovery Time Objective): қалпына келтірілгенге дейін қанша уақыт жарамды.
RPO (Recovery Point Objective): қандай көлемдегі деректерді жоғалтуға болады.

6) DRP (Disaster Recovery Plan)

Мақсаты: жүйелерді жылдам және дәйекті қалпына келтіруді қамтамасыз ету.

1. Сценарийлерді анықтау (ЦОД апаты, PSP істен шығуы, кілттерді сындыру, желіні жоғалту).

2. Әрбір сценарий үшін - дайын қадамдық playbook.

3. DR-инфрақұрылымын қолдау: резервтік кластерлер, БД-репликалар, CDN/edge.

4. RTO/RPO және failover рәсімдерін үнемі тестілеу.

5. Барлық нұсқауларды нұсқаларын бақылай отырып, бір қоймада сақтау.

Scenario: EU region falls
RTO: 30 min    RPO: 5 min
Actions:
1. Activate plan DR # EU
2. Switch DNS → AP Region
3. Verify database consistency (replication lag ≤ 60s)
4. Update Status on StatusPage
5. Perform API benchmarking

7) Командалар мен рөлдерді ұйымдастыру

BCP-үйлестіруші: бағдарлама иесі, тексерулер мен тестілерді ұйымдастырады.
DR lead: DR-жоспарларды техникалық іске асыруға жауап береді.
Domain Owners: өз процестерінің үздіксіздігін қамтамасыз етеді (Payments, Games, KYC).
Коммуникация командасы: ішкі/сыртқы хабарламаларға және статус-платформаларға жауап береді.
HR/Admin: Персонал үшін BCP (қашық орналасу, байланыс, қолжетімділік).
Legal/Compliance: реттеуші хабарламалар және заңдық шаралар.

8) Дағдарыстағы коммуникация

• Нақты арналар мен сақтық контактілер.
• Бірінші апдейт - оқиғадан кейін 15 минут ішінде.
• Коммуникациялардың бірыңғай тоны, фактілер және ETA.
• Оқиға жабылғанға дейін әрбір N минут сайын жаңарту.
• Қалпына келтірілгеннен кейін - есеп және постмортем.

[HH: MM] PSP-X failed. Impact: Deposits in EU region.
Measures: feilover on PSP-Y. ETA stabilization: 30 min.
The next update is at 15:00.

9) Тестілеу және оқу-жаттығулар

Техникалық: failover тесттер, БД қалпына келтіру, DDoS симуляциясы.
Операциялық: handover/рөлдік пәрмендерді ауыстыру.
Толық BCP жаттығулары: «blackout» сценарийі немесе провайдердің қол жетімсіздігі.

• DR-тесттер - тоқсан сайын;
• BCP-толық ауқымды оқу-жаттығу - жылына 1-2 рет.
• Құжаттау: нәтижелер, RTO/RPO-дан ауытқулар, жақсарту жөніндегі іс-қимылдар.

10) Метрика және KPI

RTO compliance: мақсатқа ≤ процестер%.
RPO compliance:% деректер жоғалмаған процестер> мақсатты.
DR test success rate: қалпына келтіру процедураларын сәтті тексеру.
BCP coverage: өзекті жоспарлары бар процестердің үлесі (> 90%).
Comms SLA: ETA бойынша жаңартуларды 15 минутқа ≤ бірінші жиынтық.
Postmortem SLA: сыни оқиғалардың 100% талдау ≤ 72 сағ.

11) Құжаттама және білімді басқару

Бірыңғай BCP-сақтау орны (нұсқалар, иелері, тексеру күндері).
Нұсқаларды бақылау: ревизия кемінде 6 айда бір рет.
Қолжетімділік: офлайн көшірмелер және резервтік байланыс арналары (телеком/мессенджерлерді қоса алғанда).
Интеграциялар: SOP, инцидент процестері және операциялық дашбордтардағы BCP сілтемесі.
Risk Register және Security Policies бағдарламаларымен үндестіру.

12) 30/60/90 - енгізу жоспары

• BCP иесін және сыни процестерді анықтау.
• Базалық BIA және жіктеуді (RTO/RPO) орындау.
• Қатерлер матрицасын және инцидент сценарийлер каталогын жасау.
• DRP үлгісін және басым сервистер үшін бірінші нұсқасын әзірлеу.

• Пилоттық DR-тестілеу (failover, БД қалпына келтіру) жүргізу.
• Коммуникациялық үлгілерді және рөлдік бөлуді дайындау.
• BCP құжаттарының бірыңғай қоймасын және SOP интеграциясын жасау.
• Командаларды және on-call қызметкерлерін оқытуды бастау.

• Командааралық BCP оқу-жаттығуын өткізу.
• RTO/RPO және KPI метриктерінің сәйкестігіне аудит жүргізу.
• BCP-процестерді қайта қарау және автоматтандыру жоспарын аяқтау.
• Тоқсандық OKR және ішкі қауіпсіздік тексерулеріне BCP қосу.

13) Қарсы үлгілер

«BCP тек меңзер үшін»: нақты тесттер мен иелері жоқ.
Ағымдағы архитектурамен сәйкес келмейтін ескірген DR-нұсқаулар.
Тексерілмеген коммуникация арналары мен байланыстар.
Есепке алынбаған тәуелділіктер (PSP, CDN, KYC-провайдерлер).
Ақаулардан кейін постмортемалардың болмауы.
Желі құлаған кезде BCP офлайн қатынасы жоқ.

14) BCP құжат құрылымының үлгісі

1. Objectives and Scope
2. Critical Processes (BIA)
3. Risk Matrix
4. Target RTO/RPO
5. DRP (by scenario)
6. Contacts and Roles
7. Communication templates
8. Schedule of tests and exercises
9. Reporting and auditing
10. Version and update history

15) Басқа бөлімдермен интеграциялау

Операциялық талдау: headroom өлшемдері және инциденттерге дейін тозу.
Ескертулер мен ескертулер жүйесі: BCP рәсімдерін іске қосу үшін ерте сигналдар.
Басқару әдебі: ашық есептер және әділ тестілер.
AI көмекшілері: BCP мәліметтерін және DR-тексеру парақтарын автоматты түрде дайындау.
Жауапкершілік мәдениеті: тренингтер, «game days», ретроспективалар.

16) FAQ

Q: BCP DRP айырмашылығы қандай?
A: BCP - кең: адамдарды, процестерді, коммуникацияларды, әріптестерді және инфрақұрылымды қамтиды. DRP - АТ-жүйелерін қалпына келтірудің техникалық жоспары.

Q: BCP-ні қаншалықты жиі жаңарту керек?
А: Әрбір ірі архитектуралық өзгерістен, оқыс оқиғадан кейін немесе 6 айда кемінде 1 рет.

Q: Серіктестерді қосу керек пе?
А: Иә. PSP, KYC және студиялар - үздіксіздік тізбегінің бір бөлігі, өздерінің OLA және BCP келісімдері болуы тиіс.