mufassall

Arxitektura / 4 / 4

Batch va stream

Reklama tarmog'i reklama beruvchiga hisob chiqarish va byudjet tugaganda reklamani to'xtatish uchun kliklarni sanaydi. Tungi job oddiy, lekin bir kun kechikadi; stream yangi, lekin vaqt, kech kelgan hodisalar va takrorlar bilan kurashishi kerak.

  • 14 daq
  • Yuqori
  • 11 qadam
Sanoq kechikishi
86 400 s
Byudjetdan oshish
0 $
Noto'g'ri sanalgan
0 %
Lab'da ochish
  • so'rov
  • javob
  • qayta yetkazish
  • takroriy
  • yo'qolgan

Raqamlar — model ssenariysi, o'lchov emas

Haqiqiy so'rov

Tungi job → Statistika bazasi

So'rov

INSERT OVERWRITE daily_clicks1
PARTITION (day = '2026-11-17')2
SELECT ad_id, count(*) AS clicks
FROM raw_clicks
WHERE day = '2026-11-17'
GROUP BY ad_id;3

Javob

wrote 18400 rows in 312 s
  1. OVERWRITE — Job butun kunni almashtiradi. Ikki marta ishga tushirsa ham natija bir xil, ikki barobar emas.
  2. PARTITION — Har kunga bitta partition. Qayta ishga tushirish faqat shu kunga tegadi.
  3. GROUP BY — Har reklama uchun to'liq kun bo'yicha bitta jami. Barcha ma'lumot allaqachon bor, hech narsa kechikmaydi.
Kurs: 42 dars
  1. 01 Asoslar

    1. So'rovning yo'li
    2. Kechikish va o'tkazuvchanlik
    3. Qog'oz ustida hisob
  2. 02 Masshtablash

    1. Vertikal va gorizontal masshtablash
    2. Yukni taqsimlash
    3. Holatsiz (stateless) serverlar
    4. Keshlash
    5. CDN va edge keshlar
  3. 03 Ma'lumot va saqlash

    1. SQL va NoSQL
    2. Bazadagi indekslar
    3. Saqlash dvigatellari: B-tree va LSM
    4. Bazani replikatsiya qilish
    5. Sharding
    6. Consistent hashing
    7. Unikal ID'lar
    8. CAP: aloqa uzilganda
    9. Konsensus va lider saylovi
    10. Tranzaksiyalar
    11. Fayl yuklash
  4. 04 Aloqa

    1. API uslublari
    2. Xabar navbatlari
    3. Pub/sub va hodisalar jurnali
    4. Real-time yangilanishlar
    5. Callback'lar ishonchliligi
  5. 05 Ishonchlilik

    1. Zaxira va failover
    2. Rate limiting
    3. Timeout va qayta urinishlar
    4. Kuzatuvchanlik (observability)
  6. 06 Arxitektura

    1. Mikroservislar
    2. Servislarni topish (service discovery)
    3. Saga va outbox
    4. Batch va stream
  7. 07 Xavfsizlik

    1. Autentifikatsiya
    2. Avtorizatsiya
    3. Shifrlash va sirlar
  8. 08 Yetkazib berish

    1. Testlash
    2. CI/CD: commit'dan production'gacha
  9. 09 Butun tizimlar

    1. Talablardan dizayngacha
    2. URL qisqartirgich loyihasi
    3. Yangiliklar lentasi loyihasi
    4. Chat loyihasi
  10. 10 Biznes jarayonlar

    1. To'lov shlyuzi