Operazioni e Gestione → Controllo qualità delle operazioni

Controllo della qualità delle operazioni

1) Perché è necessario

La qualità delle operazioni è la prevedibilità e la riproduzione delle azioni da cui dipendono i ricavi, la SLA e la fiducia degli utenti. Un forte sistema di controllo qualità riduce la variabilità, accelera gli hendover tra i turni, riduce gli errori di rilascio e aumenta la velocità di risposta agli incidenti.

• Rendere i processi misurabili e gestibili.
• Diminuisce la variabilità di esecuzione (stabilità).
• Ridurre i rifiuti (attesa, rifacimento, stampelle manuali).
• Inserisci miglioramento continuo (Kaizen) nel lavoro quotidiano.

2) Modello di qualità: QA vs QC

QA - Qualità integrata: standard, SOP, training, gate, controlli automatizzati prima e durante l'esecuzione del processo.
QC (Quality Control) - Convalida il risultato/campionamento/controllo dopo l'esecuzione (review ticket, controllo dei logi, controllo delle schede SPC).

Principio: massima qualità - in fase di progettazione e esecuzione (QA), QC rimane un'assicurazione "e una fonte di dati per migliorare.

3) Elementi chiave del sistema

1. Standard e SOP: istruzioni passo passo, modello di ruolo, assegno fogli.
2. Mappa dei processi: entrate/uscite, proprietari, processi SLO, manufatti.
3. Gate di qualità: tolleranza ai passi (pre-checks), «rubinetto di stop» per il rischio.
4. SPC - mappe di controllo, trigger.
5. Verifiche e campionamenti: controllo regolare della conformità.
6. Feedback e RCA: postmortem, 5 Why/« osso di pesce ».
7. Formazione e certificazione: matrice di abilità, turno shadow.
8. Automazione: controlli automatici, bot, regole, test di integrazione.

4) Processi sotto controllo qualità (esempi)

Turni di routine (monitoraggio, rotazione delle chiavi, becap, controlli di servizio).
Hendover e escalation (matrice di escalation, canali di comunicazione, timing).
Gestione dell'incidente (rilevamento della comunicazione ).
Rilasci/connessioni/transenne di traffico.
Operazioni con provider (PSP/KYC), ricevimenti, report.
Gestione dei contenuti/limiti, jackpot/bonusca.
Operazioni con i dati (ETL, archiviazione, privacy).

5) SLO processo e KPI qualità

• FPY (First Pass Yield) - Percentuale di processi non ridisegnati.
• RFT (Right First Time) - Quota di attività senza errori o rimborsi.
• DPMO: difetti per un milione di funzionalità (per operazioni di massa).
• SLO processo: p95/p99 durata,% completamenti completati.
• Compliance Rate - Conformità alle voci SOP/foglio di assegno obbligatori.
• Cambio Failure Rate - Percentuale di rilasci/incidenti.
• MTTD/MTTR del processo: individuazione/ripristino in caso di guasto.
• Handoff Quality Score è la qualità dell'hendover (completezza, tempestività).

6) Standard e scontrini (QA)

• Controllo sanitario dei dashboard chiave (API p99, lag, DB connection).
• Stati dei provider (PSP/KYC/studio), quote e limiti.
• Code di incidenti e postmortem non coperti.
• Piano di rilascio/phicheflag per l'intervallo di cambio.
• Canali di comunicazione ridondanti e disponibilità delle escalation.
• Bacap/chiavi/segreti - controllo pianificato.
• Hendover dal turno precedente (artefatti, rischi, osservazioni).

• Tutti i test/linter/sicurezza sono verdi.
• CDC/contratti con strumenti esterni.
• Piano di rientro e fittiflagi; il canarino è pronto.
• Runbook aggiornato, il servizio è stato confermato e le finestre dei provider sono contate.
• Le annotazioni di rilascio nei dashboard sono incluse.

7) SPC e schede di controllo

• La durata delle operazioni, il percento dei difetti, il tempo di risposta agli alert, l'ora dell'hendover.
• Regole: 1 punto fuori dai limiti, 7 punti consecutivi con altezza/caduta, 8 punti su un lato della media - Segnale di modifica del processo.
• Azioni: in caso di allarmi SPC, RCA breve e misure correttive (correzione SOP, apprendimento, automazione).

8) Controllo e selezione (QC)

Piano di campionamento: processi critici - Controlli a punti giornalieri media - settimanale; Basso - trigger.
Criteri di verifica: completezza degli assegni, precisione dell'esecuzione, correttezza delle comunicazioni, conformità SLO, conformità alla sicurezza.
Controllo di controllo: 0-100 con pesi di criticità; i risultati sono in un dashboard generale di qualità.

9) Qualità Hendover e turni

Pacchetto Handoff: stato breve, rischi, «trend osservati», azioni incomplete, SLO a intervalli.
Comunicazioni: un unico formato di update (modello), SLA di risposta in un canale di emergenza, time box per prendere decisioni.
Turni Shadow: i nuovi operatori controllano «nell'ombra», quindi passano ai turni autonomi del foglio di lavoro di certificazione.

10) Qualità dell'incidente-gestione

Definition of Done - L'incidente è chiuso solo dopo il ripristino dello SLO, la pubblicazione dell'update aziendale/zapport e la creazione di operazioni di correzione.
Non c'è accusa, fatti, cronologia, «che andrà diversamente la prossima volta».
Action Items SLA - deadline e proprietari; riconciliazione settimanale dello stato.
Metriche:% di incidenti senza regressione, tempo medio fino al primo update, timeline completa.

11) Automazione del controllo qualità

Checker auto: i bot controllano la compilazione degli assegni, la presenza di annotazioni di rilascio, la correttezza delle rotte Alertmanager.
Regole/regole: gate obbligatori in CI/CD, convalida di configure (JSON/YAML), scanner di segreti.
Processo-mining: analisi dei registri per individuare i colli di bottiglia e le deviazioni dal percorso di riferimento.
Promemoria automatica: postmortem scaduti, action items non aperti, voci SOP saltate.

12) Metriche e dashboard (set minimo)

Operations Quality Overview: FPY, RFT, DPMO, SLO processo, Change Failure Rate, open action items.
Shifts Board: esecuzione degli assegni, Handoff Quality Score, tempo di risposta agli alert, copertura del monitoraggio.
Incidents Quality: MTTD/MTTR, primo update client, RCA completezza, regressione.
Release Quality: percentuale di canarie degradate, rimborsi, durata media degli steakholder update.
Compliance & Security: esecuzione di procedure obbligatorie (backup, rotazione delle chiavi, disponibilità), violazioni e tempi di risoluzione.

13) Alerti di qualità (idee)

ALERT ShiftChecklistMissed
IF operations_shift_checklist_completed == 0 FOR 15m
LABELS {severity="warning", team="ops"}

ALERT HandoffQualityLow
IF handoff_quality_score < 80 FOR 1h
LABELS {severity="warning", team="ops"}

ALERT IncidentUpdatesSLA
IF incident_first_update_minutes > 10
LABELS {severity="critical", team="incident"}

ALERT ChangeFailureRateSpike
IF rate(release_rollbacks_total[7d]) > 1. 5 baseline_28d
LABELS {severity="warning", team="platform"}

14) Procedura di miglioramento (loop PDCA)

1. Piano - Seleziona metriche/target, identifica i colli di bottiglia in base ai dati SPC/audio.
2. Do - Pilota di modifiche (SOP, training, automazione) su una zona limitata.
3. Check - Confronta le metriche (FPY/RFT/SLO/incidenti) prima/dopo.
4. Act: ridimensiona il successo, ritira l'errore; Aggiorna gli standard.

15) Ruoli e responsabilità

Proprietario del processo: SLO, standard, dashboard, miglioramenti.
Operatori: esecuzione, assegno-fogli, incidenti-comunicazione.
SRE/Piattaforma automazione, monitoraggio, itinerari Alertmanager.
Operazioni QA: verifiche, campionamenti, mappe di controllo, formazione.
Responsabile qualità: coordinamento PDCA, priorità miglioramenti.

16) Anti-pattern

«Controlliamo dopo» è l'assenza di QA, un supporto solo per il QC post-fattura.
Assegno-fogli per un segno di spunta (nessuna conseguenza per i pass).
Non c'è un unico standard hendover per la perdita di contesto e la ripetizione di errori.
Misurano «tutto» senza l'obiettivo di → le metriche.
Postmortem senza action items e tempi di regressione costante.
Controlli manuali che possono essere automatizzati.

17) Assegno-foglio di implementazione

• Mappa dei processi, proprietari, ingressi/uscite, SLO.
• SOP e scontrini (turni, comunicati, incidenti, provider).
• Gate di qualità in CI/CD e strumenti operativi.
• Dashboard e schede di controllo SPC.
• Piano di campionamento e verifiche regolari.
• Modello di hendover e apprendimento dei turni Shadow.
• Regolamento postmortem e tracking action items.
• Automazione dei controlli e degli avvisi.
• Obiettivi di miglioramento trimestrali (FPY/RFT/SLO/MTTR).

18) Modelli (sezioni)

Handoff: <date/time>
SLO summary: <p95 API, errors, incidents>
Releases/features: <what's at work, risks, windows>
Providers: <statuses, quotas, restrictions>
Risks/observations: <trends, potential bottlenecks>
Action items before <time>: <list, owners>
Contacts: <on-call, escalations>

Impact: <who was affected, metrics>
Timeline: <UTC + timezone, key events>
Root cause: <5 Why / fishbone>
Corrective actions: <what we change now>
Preventive actions: <what we will change in the process/tools>
Owners & Due dates: <who and when>
Signals to watch: <metrics and alerts>

19) Partenza rapida (30 giorni)

Settimana 1: descrivere 3-5 processi critici, SLO, proprietari; avvia i fogli base dei turni/comunicati.
Settimana 2: includere dashboard di qualità e 3 alert (ShiftChecklist, handoff, IncidentSLA).
Settimana 3: avvia campionamenti/verifiche e SPC per 1-2 metriche.
Settimana 4: eseguire 2 postmortem secondo la metodologia e approvare il piano PDCA per il trimestre.

20) FAQ

Come si vedono gli effetti in fretta?
A: Iniziate con gli hendover e i IncidentSLA, riducendo immediatamente l'MTTR e migliorando la prevedibilità.

La SPC è necessaria se ci sono già degli alert?
A: Sì. Gli alert catturano gli incendi, gli SPC spostano il processo prima dell'incendio.

Q: Cosa automatizzare in primo luogo?
A: Gate di rilascio, controllo degli assegni di turno, annotazioni di rilascio e promemoria di action items.