DevOps e il Sistema di Consegna continua

Applicare la scena

Il team di sviluppo software incontra quasi inevitabilmente "colli di consegna" nel processo di scaling up: la frequenza delle sottomissioni di codice è in aumento, ma la velocità di accesso sta diventando più lento; diversi strumenti e processi sono in fase di sviluppo, testato, e eseguito l'uno all'altro, che richiedono il contatto manuale tra tre persone e il sistema alla volta; le differenze ambientali fanno "rimandere sulla mia macchina" un argomento verbale; e il fallimento delle linee di linea, che richiedono un numero di registro di registro di perdita di utenti.

Il problema non è che la squadra non sta lavorando duramente, ma che lo è.Mancanza di un sistema automatizzato e norme di collaborazione che collegano lo sviluppo, il test, la distribuzione, il trasporto e la comunicazioneLe scene qui descritte sono per i team software che si aspettano di costruire standardizzate pratiche DevOps e funzionalità di consegna continua, e vengono visualizzate su pagineZhiHua Tech (Shanghai e-Seok-shu Hsien-Shui Information Technology Ltd.)I metodi di costruzione e di consegna del sistema DevOps disponibili non rappresentano la divulgazione dei dati per i clienti specifici.

Sfide operative tipiche

1. Ciclo di rilascio lungo, operazioni manuali multiple e alta velocità di errore

• Costruire e distribuire manualmenteIl pacchetto manuale, il server di caricamento manuale, il servizio di riavvio manuale dopo lo sviluppo del codice, una versione semplice può richiedere mezz'ora per l'aggiornamento.
• Incoerenza ambientaleCi sono differenze nascoste tra l'ambiente di sviluppo, l'ambiente di prova, l'ambiente di pre-pubblicazione e l'ambiente di produzione - la versione del sistema operativo, la configurazione intermedia, la dipendenza dai numeri di versione della libreria di piccole dimensioni, che portano al continuo verificarsi di peculiarità dopo che il codice passato dal test viene distribuito alla produzione.
• Mancanza di meccanismi standardizzati di roll-back: Quando viene rilevato un malfunzionamento grave dopo il rilascio, il rollback dipende dalle operazioni manuali e anche dal recupero di backup, e il tempo di rollback viene misurato in ore piuttosto che minuti.

2. Risposte ritardate da test e qualità manuale di bottom-up

• La catena di prova è un collo di bottiglia.: Il periodo di prova può durare per una settimana dopo lo sviluppo del codice presentato. Il team di sviluppo continua a scrivere il codice in avanti, e al momento del ritorno del test, lo sviluppo è andato a lungo, sulla base del vecchio codice, e la riparazione di Bug è diventata una dolorosa "backsupposity psicologico".
• La copertura del test di regressione è insufficiente• Casi di runback manuali prima del rilascio, limitata al tempo e alla manodopera, di solito copre solo il processo principale.

3. Bassa risposta osservata in linea e passiva di guasto

• I registri sono sparsi e difficili da collegareSotto l'architettura dei microservizi, una richiesta dell'utente può coprire 5-10 esempi di servizio. I registri dei servizi sono sparsi su diversi server e i problemi vengono controllati su base log-by-line, senza un singolo serial trackID.
• Siamo in ritardo per la sorveglianza.: Le regole dell'allarme sono ampie, spesso solo quando il numero degli utenti è diminuito in modo significativo e l'attività è stata danneggiata e innesca l'allarme.

Il pensiero di progettazione del programma

1. Costruire linee di flusso standard CI/CD

• Inneschi di presentazione del codice: Lo sviluppo di un codice push a un ramo specifico innesca automaticamente la costruzione di una linea di flusso - compila, testa l'unità, esegue la scansione del codice (SonarQube), scansione sicura, costruzione dello specchio. Se un collegamento non funziona, lo sviluppatore riceve una notifica istantanea in IDE o Enterprise IM.
• Auto-servizio ambientale: L'ambiente di prova e l'ambiente pre-dispatch sono definiti dalla definizione standard di infrastrutture, o codice (terraform/Ansible), e qualsiasi membro del team può creare l'ambiente completo da una chiave.
• Distribuzione su scala di grigi e distribuzione di canari: I comunicati di produzione sono stati utilizzati per la prima volta il 5-10% e l'osservazione degli indicatori di base (mistakes, delays, business data) è normale e scala fino a pieno volume.

2. Istituzione di sistemi di stratificazione automatizzati di test

• Piramide di prova: Un gran numero di test unitari (in modo sicuro) Un corretto test di integrazione Un piccolo numero di test end-to-end. Ogni linea di streaming viene eseguita prima per test unitari (secondi) e poi solo dopo aver superato è test integrato.
• Automazione del test di regressione: La linea di base delle prestazioni dell'interfaccia chiave viene testata automaticamente in ogni build. Se una presentazione comporta un ritardo in un'interfaccia P99 superiore alla soglia, la build segna automaticamente come un guasto.

3. Rilevabilità della catena completa di costruzione

• Tracciamento di log e link unificato: Sulla base di ELK/Loki + OpenTelemetry, tutti i registri dei servizi sono raccolti e inseriti in TraceID. Inserisci un TraceID quando si cerca una domanda per vedere il tempo impiegato per chiamare il collegamento completo e ogni nodo.
• D.D. Guarda e sveglia intelligente.Monitoraggio delle infrastrutture (CPU/RAM/disk/network) + Monitoraggio delle applicazioni (QPS/delayed/mistake) + Monitoraggio operativo (basso/rimborso) è collegato a tre strati. Le regole di allarme supportano il rilevamento dello stesso-a-simmetrici/ring per evitare il trasferimento e il sottoriporto di soglie fisse.

Ambito di capacità di sistema

Gestione del codice e del costruire

• GitFlow/TrunkBased
• Integrato costruire e contare su gestione per progetti multimoduli
• Barra porta di qualità del codice: scansione statica, rilevamento del gap di sicurezza, ispezione di copertura di prova
• Gestione integrata del magazzino prodotti (pacchetto dello specchio/ JAR/WAR/ NPM)

• Integrazione e distribuzione in corso

• Jenkins / Gitlab CI / GitHub Azioni linea idrica
• Distribuzione automatica multi-ambiente (sviluppo/test/prepubblicazione/produzione)
• rilascio di Greyscale, distribuzione Blue Green, strategia di aggiornamento rolling
• Emissione del flusso di approvazione e automazione dei record di cambiamento

Test di automazione

• Test del modulo / Test integrato / Politica di livello di prova end-to-end
• Test di benchmark e regressione delle prestazioni
• Test di contratto di interfaccia (Pact) per garantire l'intercompatibilità dei servizi
• Test Chaos Mesh per verificare la resilienza

• Piattaforme osservabili

• Piattaforma di log centrale di ELK / Grafana Loki
• Prometeo + Indicatore Grafana Monitoraggio e visualizzazione
• OpenTelemetry, tracciamento a tutto campo.
• + Notifica multicanale (crittura/micro/fly book/PagerDuty)

Infrastrutture è il codice

• Terraform / Organizzazione risorse cloud Pulumi
• Gestione delle configurazioni ansible / SaltStack
• Kubernetes Cluster Management e Auto-Scalp
• Tabella Helm Diployment standard dell'applicazione

Prodotti

orientamento del valore intenzionato

• Sia la frequenza che l'affidabilità del rilascio: Fino a e ancora più frequentemente, le versioni mensili vengono rilasciate su richiesta, con ogni rilascio che viene ridotto significativamente da un piccolo set di modifiche.
• 70% +• Eliminazione dei collegamenti artificiali e dei collegamenti di attesa attraverso linee di flusso automatizzate.
• Tempo medio di riparazione di malfunzionamenti (MTTR) compressi da un genitore a un minuto: tracciamento a catena piena + allarme intelligente, radice di posizione non più indovinato.
• I teamworks sono passati da "serials and so on" a "scramble insieme".: L'auto-servizio ambientale, il feedback automatico dei test, lo sviluppo e il QA non si aspettano più l'uno per l'altro.