Как reload ingress-nginx уронил прод. История про pids.max, threads-max и виртуалку, которая подросла

23.06.2026 08:59:23 | Хабр

Хабы: Kubernetes, DevOps, Системное администрирование, Nginx, Open source

Схема входящего траффика в кластер Kubernetes простая: web → Envoy Gateway → Ingress Nginx → backend. За Ingress Nginx, помимо обычного HTTP, живут долгоживущие WebSocket-соединения. Штатная нагрузка - около 100 RPS. Ничего экзотического.

В один прекрасный день всё в кластере легло. Клиенты получают 503/500. В логах Envoy - флаг UF и upstream_reset_before_response_started{connection_timeout}. То есть ingress-nginx просто перестал отвечать.

Дальше - два часа разбора и довольно красивая цепочка причин, которая началась с банального reload, а закончилась на том, как ядро считает лимит потоков при старте виртуалки.

Подробнее

Читайте также

В App Store появилось приложение Toastmas с функциями «Т-Банка»
23.06.2026 08:52:47 | vc.ru

Move‑семантика в C++: пять задач, в которых легко ошибиться
23.06.2026 08:45:34 | Хабр

[Перевод] Уловки, подсмотренные у медоносных пчёл, помогают дронам возвращаться домой без GPS
23.06.2026 08:42:33 | Хабр

Когда AI-агент начинает убивать SSD: разбор инцидента с Codex и 640 ТБ логов в год
23.06.2026 08:40:56 | Хабр

Электрокар Xiaomi YU7 GT проехал по трассе Нюрбургринг… без водителя
23.06.2026 08:35:46 | ferra.ru

День 1581: продажи легковых автомобилей с пробегом в мае 2026-го выросли на 4,2% год к году
23.06.2026 08:32:48 | vc.ru

Чем Apple отличается от Золотого яблока? Или почему у Apple нет собственной программы лояльности
23.06.2026 08:31:29 | Хабр

Поймай меня, если сможешь [часть 3]: инструменты миграции в Huawei Cloud Stack —сети, серверы и данные
23.06.2026 08:25:42 | Хабр

Электрохимический транзистор: что с патентами?
23.06.2026 08:15:31 | Хабр

Skills исправляют привычки MCP исправляет память
23.06.2026 08:13:14 | Хабр

Регулирование криптовалют в России: убить то, что так и не смогли понять за прошедшие 17 лет
23.06.2026 08:09:14 | Хабр

Trouver выпустила две мощные мясорубки. От 6 500
23.06.2026 08:05:42 | ferra.ru

«Бери новое поколение» и другие плохие советы по выбору GPU в 2026 году
23.06.2026 08:01:11 | Хабр

Tensordyne Napier — еще одно решение на замену традиционных GPU в инференсе
23.06.2026 08:01:11 | Хабр

Как мы реализовали оптимальное обучение моделей в Luna Line. Часть 1. Классификация
23.06.2026 08:01:11 | Хабр

Хватит засовывать всё в контейнеры: возвращаем комфорт в локальную разработку
23.06.2026 08:00:09 | Хабр

Путь от трёх недель «в полях» до ML-прогноза по клику: история геомаркетинга в «Ленте»
23.06.2026 07:59:08 | Хабр

Один ко многим в Java: когда коллекция в родителе оправдана, а когда — нет
23.06.2026 07:36:05 | Хабр

Уволен, но не ушёл: два слоя защиты от инсайдера
23.06.2026 07:29:06 | Хабр

Из ядра Linux выпилили strncpy: шесть лет, 362 коммита, одна функция
23.06.2026 07:22:52 | Хабр

Сергей Есман: «М.Видео планирует инвестировать около 9 млрд рублей в развитие ИТ-инфраструктуры»
23.06.2026 07:17:07 | Хабр

Профессиональное выгорание: симптомы, причины и способы восстановить внутреннюю опору
23.06.2026 07:11:58 | Хабр

Как превратить один VPS в платформу для деплоя нескольких проектов без боли и Kubernetes
23.06.2026 07:00:45 | Хабр

Как навести порядок в паролях. Локальный менеджер паролей: KeePassXC, Syncthing и бэкапы
23.06.2026 07:00:44 | Хабр

Realtime-чат без WebSocket: long-polling, гонки переподключения и дубли пушей
23.06.2026 07:00:40 | Хабр

Почти $1 млн оборота за первый год на приложении про 10 000 шагов
23.06.2026 06:55:04 | Хабр

Тимлид: тупик или развилка. Разбираем семь карьерных выходов
23.06.2026 06:40:53 | Хабр

Процессная модель: от реестра процессов к архитектурному взгляду
23.06.2026 06:40:31 | Хабр

Разработка длиною в 3 года: как я писал свой PHP CMS/Framework Gy, «убийцу» Битрикса, весом 350 Кб
23.06.2026 06:39:54 | Хабр

Где заканчивается вызов LLM и начинается backend система: локальный RAG на FastAPI и Ollama
23.06.2026 06:33:29 | Хабр

Спутниковая связь в симуляторе NS-3. Часть 7
23.06.2026 06:31:30 | Хабр

Архитектура высокоэффективных нейросетевых вычислений на C++ для прогнозирования динамики ВВП
23.06.2026 06:21:59 | Хабр

Покой как фича: анти-шагомер на Expo, который ругает за активность
23.06.2026 06:00:33 | Хабр

Как вырасти до мидла: на что на самом деле смотрят тимлиды при оценке DevOps-инженеров
23.06.2026 05:58:15 | Хабр

Браузер как платформа — офисные инструменты и IT-утилиты без сервера, без установки, без регистрации
23.06.2026 05:50:10 | Хабр

Смотреть все

НОВОСТИ

Более 1,3 тыс. молодых педагогов получили "подъемные" в Подмосковье за полгода
07.08.2026 06:20:26 | ТАСС

Миронов предложил установить квоты на трудоустройство молодежи
07.08.2026 06:20:21 | ТАСС

В Туве произошло землетрясение магнитудой 4,1
07.08.2026 06:20:12 | ТАСС

Совет мира под эгидой США построит военную базу в секторе Газа
07.08.2026 06:18:36 | Lenta.ru

Россияне смогут получать квитанции за ЖКУ через "Госуслуги" с сентября 2027 года
07.08.2026 06:17:25 | ТАСС

Аэропорт Екатеринбурга приостановил прием и выпуск самолетов
07.08.2026 06:16:45 | ТАСС

Названы регионы со средней пенсией летчиков-испытателей свыше 200 тыс. рублей
07.08.2026 06:13:26 | ТАСС

Боец «Центра» четыре месяца передавал данные из тыла ВСУ
07.08.2026 06:13:00 | Life.ru

ВС России завели термобарический «будильник» для ВСУ. Российская армия поразила цели под Одессой и в Запорожье
07.08.2026 06:11:30 | Lenta.ru

Археолог Лапшин рассказал, мог ли Рюрик быть христианином
07.08.2026 06:09:44 | ТАСС

Эксперт Никифоров рассказал об угрозах регламента использования ИИ в дипломах
07.08.2026 06:09:02 | ТАСС

В МВД рассказали, как обезопасить Android-гаджеты
07.08.2026 06:08:32 | ТАСС

МВД советует для разблокировки Android-гаджетов применять PIN или графический ключ
07.08.2026 06:08:32 | ТАСС

Тральщики ТОФ в ходе учений уничтожили мины в Японском и Охотском морях
07.08.2026 06:06:19 | ТАСС

В школах ЛНР с 1 сентября начнут работать 18 земских учителей
07.08.2026 06:02:31 | ТАСС

Хуснуллин не исключил снижение ввода жилья в России без дополнительных мер
07.08.2026 06:02:23 | ТАСС

Хуснуллин не исключил снижение ввода в эксплуатацию жилья в России без дополнительных мер
07.08.2026 06:02:23 | ТАСС

Подполье: украинцы устали и истощены из-за высоких цен на продукты и ЖКХ
07.08.2026 06:02:14 | ТАСС

Силы ПВО группировки "Север" сбили более 150 летевших на Россию БПЛА ВСУ за ночь
07.08.2026 06:01:57 | ТАСС

В Москве прогнозируют кратковременные дожди и до плюс 32 градусов
07.08.2026 06:01:57 | ТАСС

ПВО "Севера" уничтожила более 150 летевших на Россию беспилотников ВСУ за ночь
07.08.2026 06:01:57 | ТАСС

Кратковременные дожди и до 32 градусов тепла прогнозируют в Москве
07.08.2026 06:01:57 | ТАСС

В одном из районов Якутии завершили аварийно-восстановительные работы
07.08.2026 06:01:37 | ТАСС

БПЛА "Севера" уничтожили танк и четыре огневых группы ВСУ за ночь
07.08.2026 06:01:26 | ТАСС

Археолог Лапшин сомневается в присутствии христиан в Ладоге времен Рюрика
07.08.2026 06:00:49 | ТАСС

Археолог Лапшин считает маловероятным присутствие христиан в Ладоге времен Рюрика
07.08.2026 06:00:49 | ТАСС

В США пришли в ужас от новой ядерной доктрины из-за России
07.08.2026 06:00:48 | Lenta.ru

Толпа линчевала педофила
07.08.2026 06:00:40 | Lenta.ru

Режим ЧС ввели в Смоленской области из-за урагана
07.08.2026 06:00:31 | Коммерсантъ

Россиянам рассказали о портящих ремонт бытовых привычках
07.08.2026 06:00:30 | Lenta.ru

Парень проснулся с эрекцией и через считанные часы отправился в неотложку
07.08.2026 06:00:25 | Lenta.ru

Первая промышленная жертва блокады: о чем говорит остановка работы Ferrexpo на Украине
07.08.2026 06:00:00 | ТАСС

В России разработали новый двигатель: какие машины его получат?
07.08.2026 06:00:00 | За рулем

«На всякий случай» не покупайте: Как собрать ребёнка в школу и не выйти за рамки бюджета
07.08.2026 06:00:00 | Life.ru

Китай в январе - июле нарастил объем торговли с ЕС на 13,6%
07.08.2026 05:57:29 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro