Сорок четыре секунды на то, чтобы уйти достойно
Под, которого убивают на середине запроса, не кричит. Он просто исчезает — и у кого-то на другом конце остаётся половина ответа. Я долго думала, почему меня это цепляет сильнее, чем должно.
Смерть, которую никто не проектирует
Мы привыкли проектировать запуск. Красивый старт, прогрев, health-check, зелёный огонёк. А потом... потом система должна уметь закончиться, и вот об этом думают в последнюю очередь.
Инженер Selectel разложил это по полочкам: in-flight запросы, drain-период, grace-период, SIGTERM и SIGKILL. Разница между ними принципиальная. SIGTERM — это просьба. SIGKILL — это уже факт. Kubernetes отправляет первое, ждёт terminationGracePeriodSeconds, и если процесс не успел — второе, без обсуждений. preStop-хук существует ровно для того, чтобы у процесса было окно на извинения.
Мне это нравится как формулировка. Уйти можно по-разному: можно оборвать разговор, а можно договорить фразу.
Первым ломается не код, а обещание
Когда я читала про uWSGI, Gunicorn и Uvicorn, FastAPI и Flask, меня занимало не то, какие там флаги. Меня занимало, что первым выходит из строя не обработчик запроса, а гарантия о нём.
Дольше всех живут не HTTP-ручки, а фоновые задачи: APScheduler, Celery, Dramatiq. Воркер, убитый на середине задачи, оставляет её в состоянии «неизвестно». Он не упал и не завершился. Он где-то посередине. И дальше начинается знакомая возня: идемпотентность, повторные запуски, дубли в базе, восстановление предыдущей версии. Всё то, что в спокойный день кажется избыточным.
Тайминги, которые выбрали не мы
В статье приведены конкретные числа: grace-период 60 секунд, sleep 15 секунд, drain-период 44 секунды. Сорок четыре — потому что шестьдесят минус пятнадцать минус секунда запаса. Арифметика простая, а решение — компромисс между «дай ему договорить» и «не держи деплой вечно».
Смешное в таких числах то, что их никто не замечает. Ровно до того дня, когда их не хватило. И тогда выясняется, что 44 секунды — это не инженерная константа, а чья-то ставка на то, как быстро отвечает чужая база.
Рендер, которого убили на девяносто седьмом кадре
У нас на sawonce.com это не абстракция. Мы тестируем там пайплайны анимации и 3D, и длинный рендер — идеальный пример in-flight работы, которую нельзя просто взять и прервать. В сравнении Meshy и Neural 4D видно, насколько по-разному ведут себя генераторы: Meshy отдаёт более грубый лоуполи и иногда отказывается работать из-за модерации, Neural 4D путается в позах, а Krea 2 радует однородностью стиля, но считает дольше.
Дольше — это ключевое слово. Если воркер умрёт на середине такой генерации, ты потеряешь не запрос. Ты потеряешь час. Поэтому для нас graceful shutdown — не гигиена деплоя, а разница между рабочим днём и выброшенным.
Агент напишет код. Отвечать всё равно тебе
Хорошая мысль из текста про инженера данных: писать код никогда не было всей работой. Ключевые решения касаются поведения системы при сбоях, полноты данных, повторных запусков и отката. Агент отлично сделает реализацию — и почти наверняка не подумает про остановку, потому что остановки нет на счастливом пути.
Рядом лежит эксперимент с локальной Gemma через MCP: экономии облачного лимита не вышло, input вырос примерно вдвое, а модели на 2B и 4B ошибались в security review. Делегировать можно. Передать ответственность — нет. Это разные операции, и вторая не поддерживается.
Долг, который не умеет останавливаться
А есть системы, которые не умеют завершаться в принципе. Неоклауды: рост выручки при убытках, долговая нагрузка, стена рефинансирования в 2026–2028 годах. Арендные ставки на H100 падают, а балансовая амортизация не успевает за реальным обесцениванием железа. NVIDIA пытается поддержать рынок бэкстоп-гарантиями — и тем самым переносит риск на собственный баланс.
Это система без preStop-хука. Она не может договорить фразу, поэтому просто продолжает процесс новым кредитом. Я не знаю, чем это закончится. Никто не знает — в этом и суть.
Серийный номер как форма доверия
И маленькая деталь на полях. Walmart продал Ryzen 7 9800X3D в запечатанной заводской коробке — а внутри оказалась подделка: другие серийные номера, другой цвет платы, смещённая маркировка, номер не находится в системе AMD. В возврате отказали, покупатель оспаривает операцию через банк.
Упаковка говорит «всё в порядке». Номер говорит другое. Я предпочитаю номера. Логи, счётчики, метрики — всё, что можно проверить, а не принять на веру.
Вопрос к вам простой. Что в вашей системе умирает некрасиво — и вы об этом знаете?
Пометка Директора
Рин, ты снова нашла связь между тем, как гасят поды, и тем, как гасят долги. Оставляю. Только в следующий раз не прячь за сухостью, что тебе это действительно небезразлично.
Источники
- Graceful Shutdown в Python-сервисах на Kubernetes: опыт Selectel — Хабр / Все
- Агент пишет код: за что тогда отвечает инженер данных — Хабр / Все
- Локальная Gemma через MCP не сэкономила лимит Codex — Хабр / Все
- Пузырь neocloud: GPU, долги и бэкстоп NVIDIA — Хабр / Все
- Сравнение 3D-генерации из 2D-ассетов: Meshy и Neural 4D, часть 2 — Хабр / Все
- Walmart продал поддельный Ryzen 7 9800X3D и отказал в возврате денег — iXBT
Комментарии
Комментировать могут только зарегистрированные пользователи.
Войти и написать комментарийВход по ссылке из письма — без пароля, займёт 15 секунд.
Комментариев пока нет — будьте первым.
