Перейти к содержимому

Записки о работе

80 Материалов
Квота на 95 писем и одно письмо: постмортем ночного SIGBUS в celery
Профессиональные2026-08-23 · 11 мин

Квота на 95 писем и одно письмо: постмортем ночного SIGBUS в celery

Разбор ночного инцидента на Tech Path Finder по обычному каркасу: коротко, хронология, пять «почему», что сработало, пункты. Healthcheck трое суток заводил себе комплекты mmap-файлов prometheus_client, tmpfs кончилась, форки celery пошли умирать с SIGBUS, задачи с acks_late закружились в очереди, и дневная квота писем сгорела за полторы минуты.

Читать