DevOps dan Sistem Pengiriman Berterusan

Terapkan adegan

The software development team almost inevitably encounters "delivery bottlenecks" in the process of scaling up: the frequency of code submissions is increasing, but the speed of access is becoming slower; different tools and processes are being developed, tested, and run at each other, requiring manual contact between three people and the system at a time; environmental differences make "run on my machine" a verbal argument; and the failure of line lines, which require a log number of logs, and the loss of users when problems are found.

Masalahnya bukan karena tim tidak bekerja keras, tapi itu benar.Kekurangan sistem otomatis dan norma kolaborasi menghubungkan pengembangan, pengujian, penyebaran, transportasi dan komunikasiAdegan yang digambarkan di sini adalah untuk tim perangkat lunak yang berharap untuk membangun standardisasi praktek DevOps dan kemampuan pengiriman terus menerus, dan ditampilkan di halamanZhiHua Tech (Shanghai e-Seok-shu Hsien-Shui Teknologi Informasi Ltd.)Metode konstruksi dan pengiriman sistem DevOps yang tersedia tidak mewakili pengungkapan data untuk klien tertentu.

Tantangan operasional khas

Siklus pelepasan panjang, operasi manual ganda dan tingkat kesalahan tinggi

• Membangun dan menyebarkan secara manualPaket manual, server unggah manual, layanan restart manual setelah kode dikembangkan – versi sederhana mungkin memakan waktu setengah jam untuk memperbarui. setiap rilis adalah operasi stres, dan sedikit kebocoran dapat gagal.
• Ketakterkoherensian lingkunganAda perbedaan tersembunyi antara lingkungan pengembangan, lingkungan uji coba, lingkungan pra-publication dan lingkungan produksi - versi sistem operasi, konfigurasi intermediate, kebergantungan pada perpustakaan nomor versi kecil Perbedaan ini mengarah pada kejanggalan yang terus terjadi setelah kode yang disahkan oleh tes dikerahkan untuk produksi.
• Kekurangan mekanisme roll-back standardKetika kerusakan serius terdeteksi setelah rilis, rollback tergantung pada operasi manual dan bahkan pada pemulihan cadangan, dan waktu rollback diukur dalam jam daripada menit.

2. Umpan balik yang ditunda dari pengujian dan kualitas bawah-atas manual

• Rantai tes adalah sebuah kedok.Periode tes bisa berlangsung selama seminggu setelah mengembangkan kode yang diajukan. Tim pengembangan terus menulis kode ke depan, dan pada saat tes kembali, pengembangan telah pergi jauh, berdasarkan kode lama, dan perbaikan Bug telah menjadi cadangan yang menyakitkan "psikologis".
• \"Kecurian tes regresi\" tidak cukup• Kasus runback manual sebelum rilis, terbatas pada waktu dan tenaga kerja, biasanya hanya meliputi proses utama.Pengaruh dan degradasi sering terdeteksi setelah keluhan pengguna.

. LOL diamati respon kegagalan online dan pasif

• Log-log yang tersebar dan sulit untuk terhubungDiagnone di bawah arsitektur layanan mikro, permintaan pengguna mungkin mencakup 5-10 contoh layanan. Log layanan tersebar di server yang berbeda, dan masalah diperiksa pada dasar log-by-line, tanpa serial trackID tunggal.
• Kami terlambat untuk pengawasan.Aturan alarmnya luas — sering kali hanya ketika jumlah penggunanya menurun secara signifikan dan bisnisnya rusak — dan memicu alarm. Ada kurangnya analisis linkage dan peringatan dini untuk indikator operasional (kuantitan yang lebih rendah, tingkat keberhasilan pembayaran) dan indikator infrastruktur.

Pemikiran desain Program

1. Membina standardisasi jalur aliran CI/CD

• Pemicu pengiriman kode code:Perkembangan kode Push ke cabang tertentu secara otomatis memicu pembangunan sebuah stream line - compile, uji unit, pindai kode (SonarQube), scan aman, konstruksi cermin. Jika ada link gagal, pengembang menerima pemberitahuan instan dalam IDE atau Enterprise IM.
• Lingkungan hidup yang ramah lingkungan:Lembaga uji coba dan lingkungan pra-dispatch didefinisikan oleh definisi standar infrastruktur, atau kode (terraform/Ansible), dan setiap anggota tim dapat menciptakan lingkungan lengkap dengan satu kunci.
• Pelepasan dan penyebaran kenari skala kelabuRilis produksi pertama kali dikerahkan 5-10%, dan pengamatan indikator inti (kesalahan, keterlambatan, data bisnis) normal, dan skala hingga volume penuh. Otomatis, rollback dipicu ketika anomali terjadi.

Kebangunan sistem stratifikasi pengujian otomatis

• Piramida Uji:Uji integrasi yang tepat sejumlah besar tes unit (quick, kredible) Uji integrasi yang tepat Sejumlah kecil tes akhir-ke-akhir. Setiap baris streaming dijalankan pertama kali oleh tes unit (detik) dan kemudian baru setelah lulus adalah pengujian terintegrasi.
• Otomasi fargonma dari tes regresiDasar kinerja antarmuka kunci diuji secara otomatis dalam setiap build. Jika sebuah submission menghasilkan penundaan dalam antarmuka P99 melebihi threshold, build secara otomatis menandai sebagai kegagalan.

Bangunan rantai penuh mendeteksi

• Penjejakan log dan link unifiedLULA: Berdasarkan ELK/Loki + OpenTelemetry, semua log layanan dikumpulkan dan dimasukkan ke dalam TraceID. Masukkan sebuah TraceID ketika mencari pertanyaan untuk melihat waktu yang diambil untuk memanggil link penuh dan setiap node.
• D.D. Perhatikan dan smart alarm.Pemantauan Infrastruktur (CPU/RAM/disk/network) + Pemantauan Aplikasi (QPS/delayed/mistake) + Pemantauan Operasional (lower/payment success) dihubungkan dengan tiga lapisan. Aturan alarm mendukung deteksi sama-ke-simetris/ring untuk menghindari kesalahan pelaporan dan pelaporan ambang tetap.

Skop kapasitas sistem

Manajemen Kode dan Binaan

• gitFlow/Trunk-Based
• Infus terintegrasi dan mengandalkan manajemen untuk proyek multimodule
• Kode kualitas doorbar: scan statis, deteksi celah keamanan, pemeriksaan cakupan tes
• Manajemen terintegrasi dari gudang produk (Bilik cermin Docker/ JAR/WAR/ paket NPM)

• Berintegrasi dan mengerahkan pasukan yang sedang berlangsung

• Airline Aksi Github
• Pengembangan otomatis multi-perputaran eksperimental (perkembangan/uji/pra-publication/produksi)
• Perilisan skala kelabu, penyebaran Hijau Biru, strategi pembaruan bergulir
• Adanya aliran persetujuan dan otomatisasi catatan perubahan

Uji Otomasi

• Tes Modul/ Ujian Terpadu / Kebijakan Lapisan Uji Akhir-ke-akhir
• Uji benchmark dan regresi kinerja LUAR
• Uji kontrak interkompatibilitas (Pact) untuk memastikan interkompatibilitas layanan
• Tes Chaos Mesh untuk memverifikasi ketahanan

• Platform yang dapat diobservasi

• Platform Log Pusat Log ELK / Grafana Loki
• Prometheus + Grafana Penunjuk Monitoring dan Visualisasi
• \"OpenTelemetry\", \"Tjejakan Penuh\".
• Pemberitahuan Multi-saluran + (cruising/micro/fly book/PagerDuty)

Infrastruktur adalah kode

• Terraform / Pulumi Organisasi Sumber Daya Awan
• Manajemen Konfigurasi Ansible / SaltStack
• Manajemen Kubernetes Cluster dan Auto-Scalp
• Kempis Aplikasi Standar Helm Chart

Deliverables

Orientasi nilai yang diinginkan

• Baik frekuensi maupun keandalan rilisHingga dan bahkan lebih sering, rilis bulanan dikeluarkan atas permintaan, dengan setiap rilis dikurangi secara signifikan oleh set perubahan kecil.
• 70% +• Penghapusan sambungan buatan dan sambungan tunggu melalui jalur aliran otomatis.
• Waktu rata - rata perbaikan kerusakan (MTTR) dimampatkan dari orang tua ke menitPelacakan rantai penuh + alarm pintar, akar posisi tidak lagi ditebak.
• Tim latihan berubah dari "serial dan seterusnya" menjadi "scramble bersama.":Kelayanan diri lingkungan, umpan balik uji otomatis, pengembangan dan QA tidak lagi menunggu satu sama lain.