Konspekt · Yetkazib berish
CI/CD: commit'dan production'gacha
Muammo
Jamoa haftada bir marta, qo'lda deploy qiladi va har uchinchi deploy nimanidir buzadi. Commit'dan production'gacha yo'l qadamma-qadam avtomatik, kichik va orqaga qaytariladigan bo'ladi, oxirida jamoa kuniga o'nlab marta deploy qiladi.
Nimani o'rganasiz
- CI har commit'ni bir marta build va test qiladi va bitta o'zgarmas artefakt chiqaradi
- Rolling, blue-green va canary deploy: har birining narxi va qanchalik tez orqaga qaytishi
- Xato darajasi bo'yicha avtomatik rollback va deploy'ni release'dan ajratadigan feature flag'lar
- To'rtta yetkazish ko'rsatkichi: kunlik deploy, lead time, muvaffaqiyatsiz deploy ulushi, tiklanish vaqti
Diagramma kod sifatida
Darsdagi yakuniy sxemani matn ko'rinishida oling va Jira, GitLab, GitHub, Notion yoki hujjatga qo'ying: Mermaid u yerlarda o'zi chiziladi. D2 va PlantUML (Confluence, IntelliJ) uchun alohida variantlar bor.
Mermaid: sxema
flowchart LR
n_dev(("Dasturchi"))
n_users(["Foydalanuvchilar"])
n_lb{"Load balancer"}
n_ci("CI/CD")
n_registry[("Artefakt registry")]
n_green["Green serverlar"]
n_blue["Blue serverlar"]
n_flags["Feature flag'lar"]
n_users --> n_lb
n_dev --> n_ci
n_ci --> n_registry
n_ci --> n_green
n_lb --> n_green
n_lb --> n_blue
n_ci --> n_lb
n_green --> n_flagsMermaid: so'rovlar ketma-ketligi
sequenceDiagram
actor n_dev as Dasturchi
participant n_blue as Blue serverlar
participant n_ci as CI/CD
participant n_lb as Load balancer
participant n_green as Green serverlar
participant n_flags as Feature flag'lar
Note over n_dev,n_blue: Juma kungi deploy, qo'lda, oltita serverga
n_dev->>n_blue: $ ssh deploy@192.0.2.12
Note over n_dev,n_ci: CI: har commit bir marta build va test qilinadi
n_dev->>n_ci: commit 3f9a1c2 by u_42: checkout, new card form
Note over n_lb,n_green: Rolling deploy: bir vaqtda bitta server
n_lb->>n_green: GET /healthz HTTP/1.1
n_green-->>n_lb: HTTP/1.1 200 OK
Note over n_lb,n_green: Health check o'tadi, checkout yiqiladi
n_lb->>n_green: POST /checkout HTTP/1.1
n_green-->>n_lb: HTTP/1.1 500 Internal Server Error
Note over n_ci,n_lb: Blue-green: eski versiyani issiq holda saqlash
n_ci->>n_lb: PUT /admin/routes/api HTTP/1.1
n_lb-->>n_ci: HTTP/1.1 200 OK
Note over n_ci,n_lb: Canary: avval foydalanuvchilarning 5% i
n_ci->>n_lb: GET /admin/stats?window=3m HTTP/1.1
n_lb-->>n_ci: HTTP/1.1 200 OK
Note over n_ci,n_lb: Rollback'ni odam emas, qoida qiladi
n_ci->>n_lb: PUT /admin/routes/api/green HTTP/1.1
n_lb-->>n_ci: HTTP/1.1 200 OK
Note over n_green,n_flags: Feature flag'lar: deploy — bu release emas
n_green->>n_flags: GET /flags/new-checkout?user=u_42 HTTP/1.1
n_flags-->>n_green: HTTP/1.1 200 OK
Note over n_dev,n_ci: Kuzatiladigan to'rtta raqam
n_dev->>n_ci: delivery report, week 46D2
direction: right
n_dev: "Dasturchi" {
shape: person
}
n_users: "Foydalanuvchilar" {
shape: rectangle
}
n_lb: "Load balancer" {
shape: diamond
}
n_ci: "CI/CD" {
shape: rectangle
style.multiple: true
}
n_registry: "Artefakt registry" {
shape: stored_data
}
n_green: "Green serverlar" {
shape: rectangle
}
n_blue: "Blue serverlar" {
shape: rectangle
}
n_flags: "Feature flag'lar" {
shape: rectangle
}
n_users -> n_lb
n_dev -> n_ci
n_ci -> n_registry
n_ci -> n_green
n_lb -> n_green
n_lb -> n_blue
n_ci -> n_lb
n_green -> n_flagsPlantUML: so'rovlar ketma-ketligi
@startuml
actor "Dasturchi" as n_dev
participant "Blue serverlar" as n_blue
participant "CI/CD" as n_ci
participant "Load balancer" as n_lb
participant "Green serverlar" as n_green
participant "Feature flag'lar" as n_flags
note over n_dev, n_blue : Juma kungi deploy, qo'lda, oltita serverga
n_dev -> n_blue : $ ssh deploy@192.0.2.12
note over n_dev, n_ci : CI: har commit bir marta build va test qilinadi
n_dev -> n_ci : commit 3f9a1c2 by u_42: checkout, new card form
note over n_lb, n_green : Rolling deploy: bir vaqtda bitta server
n_lb -> n_green : GET /healthz HTTP/1.1
n_green --> n_lb : HTTP/1.1 200 OK
note over n_lb, n_green : Health check o'tadi, checkout yiqiladi
n_lb -> n_green : POST /checkout HTTP/1.1
n_green --> n_lb : HTTP/1.1 500 Internal Server Error
note over n_ci, n_lb : Blue-green: eski versiyani issiq holda saqlash
n_ci -> n_lb : PUT /admin/routes/api HTTP/1.1
n_lb --> n_ci : HTTP/1.1 200 OK
note over n_ci, n_lb : Canary: avval foydalanuvchilarning 5% i
n_ci -> n_lb : GET /admin/stats?window=3m HTTP/1.1
n_lb --> n_ci : HTTP/1.1 200 OK
note over n_ci, n_lb : Rollback'ni odam emas, qoida qiladi
n_ci -> n_lb : PUT /admin/routes/api/green HTTP/1.1
n_lb --> n_ci : HTTP/1.1 200 OK
note over n_green, n_flags : Feature flag'lar: deploy — bu release emas
n_green -> n_flags : GET /flags/new-checkout?user=u_42 HTTP/1.1
n_flags --> n_green : HTTP/1.1 200 OK
note over n_dev, n_ci : Kuzatiladigan to'rtta raqam
n_dev -> n_ci : delivery report, week 46
@endumlPlantUML: komponentlar
@startuml
left to right direction
actor "Dasturchi" as n_dev
agent "Foydalanuvchilar" as n_users
node "Load balancer" as n_lb
collections "CI/CD" as n_ci
storage "Artefakt registry" as n_registry
component "Green serverlar" as n_green
component "Blue serverlar" as n_blue
component "Feature flag'lar" as n_flags
n_users --> n_lb
n_dev --> n_ci
n_ci --> n_registry
n_ci --> n_green
n_lb --> n_green
n_lb --> n_blue
n_ci --> n_lb
n_green --> n_flags
@endumlXulosa
Har deploy'ni kichik, avtomatik va oson qaytariladigan qiling.
1) CI har commit'ni bir marta build va test qiladi va bitta o'zgarmas artefakt chiqaradi. 2) Rolling qo'shimcha server so'ramaydi, lekin sekin qaytadi. 3) Blue-green bir soniyada qaytadi, narxi ikki baravar quvvat. 4) Canary yomon release'ni bir necha foizga cheklaydi, qoida esa uni o'zi qaytaradi. 5) Feature flag'lar kodni deploy'siz yoqadi va o'chiradi. 6) Kunlik deploy, lead time, muvaffaqiyatsiz deploy ulushi va tiklanish vaqtini kuzating.
Ko'rsatkichlar: boshida va oxirida
| Ko'rsatkich | Boshida | Oxirida |
|---|---|---|
| Deploy'lar | 0,1/kun | 12/kun |
| Muvaffaqiyatsiz deploy | 30% | 4% |
| Tiklanish vaqti | 5 400 s | 90 s |
| Xato darajasi | 40% | 0,3% |
Qadamlar
- Muammo Juma kungi deploy, qo'lda, oltita serverga
Haftada bir marta dasturchi SSH orqali oltita serverning har biriga zip ko'chiradi va ilovani qayta ishga tushiradi.
- Yechim CI: har commit bir marta build va test qilinadi
Har push endi pipeline'ni ishga tushiradi: build, testlar, natijani commit bilan teglangan image qilib registry'ga qo'yish.
- Yechim Rolling deploy: bir vaqtda bitta server
CI serverlarni birma-bir almashtiradi.
- Muammo Health check o'tadi, checkout yiqiladi
Almashtirish tugadi: oltita serverning hammasida yangi versiya.
- Yechim Blue-green: eski versiyani issiq holda saqlash
Endi serverlarning ikkita to'liq to'plami bor.
- Yechim Canary: avval foydalanuvchilarning 5% i
Keyingi release green'ga tushadi, lekin load balancer unga so'rovlarning faqat 5% ini yuboradi.
- Yechim Rollback'ni odam emas, qoida qiladi
Qoida pipeline'da yozilgan: canary'ning xato darajasi uch daqiqa davomida barqaror to'plamnikidan ikki baravar ko'p bo'lsa, uning og'irligini nolga tushir va release'ni yomon deb belgila.
- Yechim Feature flag'lar: deploy — bu release emas
Yangi checkout endi flag ortida o'chirilgan holda chiqadi.
- Holat Kuzatiladigan to'rtta raqam
Jamoa endi to'rtta raqamni kuzatadi.
- Xulosa Xulosa
Har deploy'ni kichik, avtomatik va oson qaytariladigan qiling.
Atamalar
- CI/CD
- CI har commit'ni bir marta build va test qilib, bitta o'zgarmas artefakt chiqaradi; faqat yashil build deploy bo'ladi. Deploy kichik, avtomatik va oson qaytariladigan bo'ladi.
- Blue-green deploy
- Ikki to'liq server to'plami: yangi versiya bo'sh to'plamga chiqadi va balancer trafikni bir qadamda o'tkazadi. Orqaga qaytish soniyadan kam, narxi esa ikki baravar server.
- Canary deploy
- Yangi versiya avval trafikning kichik qismiga, masalan 5% iga beriladi va xato darajasi eski versiya bilan solishtiriladi. Yomon release ozchilikka tegadi va qoida uni o'zi orqaga qaytaradi.
- Feature flag
- Kod prod'ga o'chirilgan holda chiqadi va flag orqali avval xodimlarga, keyin foydalanuvchilarning bir qismiga yoqiladi. Muammo bo'lsa flag bir soniyada o'chiriladi: deploy bu hali release emas.