mufassall

Надёжность / 6 / 6

Backpressure

Мобильное приложение шлёт события аналитики в ingest API, а тот держит их в памяти, пока writer не запишет их в базу. Когда база замедляется, события приходят быстрее, чем уходят, у буфера нет предела, и API падает по памяти с 1,8 миллиона уже подтверждённых событий. Backpressure — это способ системы сказать «помедленнее» вверх по цепочке: ограниченный буфер, выбранная стратегия переполнения, 429 с Retry-After, потребители, которые сами забирают работу, отказ по приоритету и лимит на входе.

  • 14 мин
  • Средний
  • 10 шагов
Память API
40 МБ
Задержка события
0,5 с
Потеряно событий
0
Отклонено событий
0 %
В Лабораторию

40%60%
  • запрос
  • ответ
  • повторная доставка
  • дубликат
  • потеряно

Цифры — модельный сценарий, не замеры

Настоящий запрос

Мобильные приложения → Ingest API

Запрос

POST /v1/events HTTP/1.12
Host: ingest.example.com
Authorization: скрыто

{
  "device": 1"d_7f",
  "events": [
    { "type": "screen_view", "ts": 1763481600 },
    { "type": "add_to_cart", "ts": 1763481602 }
  ]
}

Ответ

HTTP/1.1 202 Accepted3
{ "accepted": 450 }
  1. device — Какой телефон прислал пачку.
  2. events — До 50 событий за запрос, чтобы приложение не открывало соединение на каждое нажатие.
  3. 202 Accepted — «Принял», а не «сохранил». Пока событие живёт только в памяти API.
  4. accepted — Сколько событий из пачки взял API.

А что, если…?

Подставьте свои числа: результат и формула пересчитываются сразу.

Сколько событий в секунду приходит в API.

Сколько writer'ов пишут параллельно.

Сколько одному writer'у нужно, чтобы записать одно событие. При медленной базе 5 мс.

Результат

Нагрузка ρ
0,60
Вероятность ждать
29%
Среднее ожидание в буфере
0,4мс
Задержка всего
2,4мс
Событий в буфере в среднем
0,4

Расчёт

μ = 1000 / 2 мс = 500,0/с
ρ = λ / (c × μ) = 1 200 / (4 × 500,0) = 0,60
P(wait) = ErlangC(c = 4, λ/μ = 2,40) = 0,287
Wq = P(wait) / (c × μ − λ) = 0,287 / 800,0 = 0,4 мс

Упрощённая учебная модель: показывает направление и масштаб, а не бенчмарк.

Соберите самиШпаргалкаСравнение уроков

Курс: Уроков: 74
  1. 01 Основы

    1. Жизнь одного запроса
    2. Задержка и пропускная способность
    3. Оценка на салфетке
  2. 02 Масштабирование

    1. Вертикальное и горизонтальное масштабирование
    2. Балансировка нагрузки
    3. Серверы без состояния
    4. Кеширование
    5. Инвалидация кеша
    6. CDN и кеш на краю сети
  3. 03 Данные и хранение

    1. SQL и NoSQL
    2. Индексы в базе данных
    3. Геопоиск: кто рядом
    4. Полнотекстовый поиск
    5. Векторный поиск
    6. Движки хранения: B-tree и LSM
    7. Фильтр Блума
    8. Репликация базы данных
    9. Шардирование
    10. Консистентное хеширование
    11. Уникальные идентификаторы
    12. CAP: когда рвётся связь
    13. Консенсус и выбор лидера
    14. Транзакции
    15. Загрузка файлов
  4. 04 Взаимодействие

    1. Стили API
    2. Очереди сообщений
    3. Pub/sub и журнал событий
    4. Обновления в реальном времени
    5. Надёжные колбэки
    6. Надёжная отправка вебхуков
  5. 05 Надёжность

    1. Резервирование и failover
    2. Rate limiting
    3. Таймауты и ретраи
    4. Наблюдаемость
    5. SLO и бюджет ошибок
    6. Backpressure
  6. 06 Архитектура

    1. Микросервисы
    2. Обнаружение сервисов
    3. Саги и outbox
    4. Захват изменений данных (CDC)
    5. Транзакционный outbox
    6. Распределённые блокировки
    7. Batch и stream
    8. Мультитенантность
    9. Event sourcing
  7. 07 Безопасность

    1. Аутентификация
    2. Авторизация
    3. Шифрование и секреты
    4. Управление секретами
  8. 08 Поставка

    1. Тестирование
    2. CI/CD: от коммита до продакшена
    3. Миграции без простоя
    4. Фича-флаги
  9. 09 Целые системы

    1. От требований к дизайну
    2. Проектируем сокращатель ссылок
    3. Проектируем ленту новостей
    4. Проектируем чат
    5. Проектируем видеохостинг
    6. Проектируем поисковые подсказки (autocomplete)
    7. Проектируем планировщик задач
  10. 10 Бизнес-процессы

    1. Платёжный шлюз
    2. Деньги и округление
    3. Двойная запись в учёте денег
    4. Сверка платежей
    5. Биллинг подписок
    6. Электронная цифровая подпись
    7. Жизненный цикл документа
    8. Журнал аудита
    9. Доставка уведомлений
    10. Массовый импорт
    11. Возвраты и чарджбэки
    12. Сквозная нумерация документов
  11. 11 Разборы реальных систем

    1. Разбор: как Discord хранит сообщения
    2. Разбор: совместное редактирование в Figma