mufassall

Ma'lumot va saqlash / 5 / 11

Sharding

Chat servisining xabarlar jadvali 6 TB ga yetadi va bitta server uni ko'tara olmaydi. Uni shard'larga bo'lamiz, shard kalitini tanlaymiz, qizib ketgan shard va qizib ketgan kalitga duch kelamiz va hamma narsani ko'chirmasdan to'rtinchi shard qo'shamiz.

  • 13 daq
  • O'rta
  • 10 qadam
So'rov p95
1 400 ms
Eng qizigan shard yuki
98 %
Bir so'rovdagi shard'lar
1
Eng katta shard
6 TB
Lab'da ochish
45%98%
  • so'rov
  • javob
  • qayta yetkazish
  • takroriy
  • yo'qolgan

Raqamlar — model ssenariysi, o'lchov emas

Haqiqiy so'rov

Chat API → Xabarlar bazasi

So'rov

INSERT INTO messages (chat_id, sender_id, body)1
VALUES ('c_8812', 'u_42', 'see you at 7');

Javob

INSERT 0 1
Time: 1380.5 ms2
  1. chat_id — Xabar tegishli chat. Deyarli har so'rov shu bo'yicha filtrlaydi.
  2. Time — Bitta xabarni yozish uchun 1,4 soniya. So'rov emas, server joyi tugagan.
Kurs: 42 dars
  1. 01 Asoslar

    1. So'rovning yo'li
    2. Kechikish va o'tkazuvchanlik
    3. Qog'oz ustida hisob
  2. 02 Masshtablash

    1. Vertikal va gorizontal masshtablash
    2. Yukni taqsimlash
    3. Holatsiz (stateless) serverlar
    4. Keshlash
    5. CDN va edge keshlar
  3. 03 Ma'lumot va saqlash

    1. SQL va NoSQL
    2. Bazadagi indekslar
    3. Saqlash dvigatellari: B-tree va LSM
    4. Bazani replikatsiya qilish
    5. Sharding
    6. Consistent hashing
    7. Unikal ID'lar
    8. CAP: aloqa uzilganda
    9. Konsensus va lider saylovi
    10. Tranzaksiyalar
    11. Fayl yuklash
  4. 04 Aloqa

    1. API uslublari
    2. Xabar navbatlari
    3. Pub/sub va hodisalar jurnali
    4. Real-time yangilanishlar
    5. Callback'lar ishonchliligi
  5. 05 Ishonchlilik

    1. Zaxira va failover
    2. Rate limiting
    3. Timeout va qayta urinishlar
    4. Kuzatuvchanlik (observability)
  6. 06 Arxitektura

    1. Mikroservislar
    2. Servislarni topish (service discovery)
    3. Saga va outbox
    4. Batch va stream
  7. 07 Xavfsizlik

    1. Autentifikatsiya
    2. Avtorizatsiya
    3. Shifrlash va sirlar
  8. 08 Yetkazib berish

    1. Testlash
    2. CI/CD: commit'dan production'gacha
  9. 09 Butun tizimlar

    1. Talablardan dizayngacha
    2. URL qisqartirgich loyihasi
    3. Yangiliklar lentasi loyihasi
    4. Chat loyihasi
  10. 10 Biznes jarayonlar

    1. To'lov shlyuzi