Как reload ingress-nginx уронил прод. История про pids.max, threads-max и виртуалку, которая подросла

23.06.2026 08:59:23 | Хабр

Хабы: Kubernetes, DevOps, Системное администрирование, Nginx, Open source

Схема входящего траффика в кластер Kubernetes простая: web → Envoy Gateway → Ingress Nginx → backend. За Ingress Nginx, помимо обычного HTTP, живут долгоживущие WebSocket-соединения. Штатная нагрузка - около 100 RPS. Ничего экзотического.

В один прекрасный день всё в кластере легло. Клиенты получают 503/500. В логах Envoy - флаг UF и upstream_reset_before_response_started{connection_timeout}. То есть ingress-nginx просто перестал отвечать.

Дальше - два часа разбора и довольно красивая цепочка причин, которая началась с банального reload, а закончилась на том, как ядро считает лимит потоков при старте виртуалки.

Подробнее

Читайте также

В App Store появилось приложение Toastmas с функциями «Т-Банка»
23.06.2026 08:52:47 | vc.ru

Move‑семантика в C++: пять задач, в которых легко ошибиться
23.06.2026 08:45:34 | Хабр

[Перевод] Уловки, подсмотренные у медоносных пчёл, помогают дронам возвращаться домой без GPS
23.06.2026 08:42:33 | Хабр

Когда AI-агент начинает убивать SSD: разбор инцидента с Codex и 640 ТБ логов в год
23.06.2026 08:40:56 | Хабр

Электрокар Xiaomi YU7 GT проехал по трассе Нюрбургринг… без водителя
23.06.2026 08:35:46 | ferra.ru

День 1581: продажи легковых автомобилей с пробегом в мае 2026-го выросли на 4,2% год к году
23.06.2026 08:32:48 | vc.ru

Чем Apple отличается от Золотого яблока? Или почему у Apple нет собственной программы лояльности
23.06.2026 08:31:29 | Хабр

Поймай меня, если сможешь [часть 3]: инструменты миграции в Huawei Cloud Stack —сети, серверы и данные
23.06.2026 08:25:42 | Хабр

Электрохимический транзистор: что с патентами?
23.06.2026 08:15:31 | Хабр

Skills исправляют привычки MCP исправляет память
23.06.2026 08:13:14 | Хабр

Регулирование криптовалют в России: убить то, что так и не смогли понять за прошедшие 17 лет
23.06.2026 08:09:14 | Хабр

Trouver выпустила две мощные мясорубки. От 6 500
23.06.2026 08:05:42 | ferra.ru

«Бери новое поколение» и другие плохие советы по выбору GPU в 2026 году
23.06.2026 08:01:11 | Хабр

Tensordyne Napier — еще одно решение на замену традиционных GPU в инференсе
23.06.2026 08:01:11 | Хабр

Как мы реализовали оптимальное обучение моделей в Luna Line. Часть 1. Классификация
23.06.2026 08:01:11 | Хабр

Хватит засовывать всё в контейнеры: возвращаем комфорт в локальную разработку
23.06.2026 08:00:09 | Хабр

Путь от трёх недель «в полях» до ML-прогноза по клику: история геомаркетинга в «Ленте»
23.06.2026 07:59:08 | Хабр

Один ко многим в Java: когда коллекция в родителе оправдана, а когда — нет
23.06.2026 07:36:05 | Хабр

Уволен, но не ушёл: два слоя защиты от инсайдера
23.06.2026 07:29:06 | Хабр

Из ядра Linux выпилили strncpy: шесть лет, 362 коммита, одна функция
23.06.2026 07:22:52 | Хабр

Сергей Есман: «М.Видео планирует инвестировать около 9 млрд рублей в развитие ИТ-инфраструктуры»
23.06.2026 07:17:07 | Хабр

Профессиональное выгорание: симптомы, причины и способы восстановить внутреннюю опору
23.06.2026 07:11:58 | Хабр

Как превратить один VPS в платформу для деплоя нескольких проектов без боли и Kubernetes
23.06.2026 07:00:45 | Хабр

Как навести порядок в паролях. Локальный менеджер паролей: KeePassXC, Syncthing и бэкапы
23.06.2026 07:00:44 | Хабр

Realtime-чат без WebSocket: long-polling, гонки переподключения и дубли пушей
23.06.2026 07:00:40 | Хабр

Почти $1 млн оборота за первый год на приложении про 10 000 шагов
23.06.2026 06:55:04 | Хабр

Тимлид: тупик или развилка. Разбираем семь карьерных выходов
23.06.2026 06:40:53 | Хабр

Процессная модель: от реестра процессов к архитектурному взгляду
23.06.2026 06:40:31 | Хабр

Разработка длиною в 3 года: как я писал свой PHP CMS/Framework Gy, «убийцу» Битрикса, весом 350 Кб
23.06.2026 06:39:54 | Хабр

Где заканчивается вызов LLM и начинается backend система: локальный RAG на FastAPI и Ollama
23.06.2026 06:33:29 | Хабр

Спутниковая связь в симуляторе NS-3. Часть 7
23.06.2026 06:31:30 | Хабр

Архитектура высокоэффективных нейросетевых вычислений на C++ для прогнозирования динамики ВВП
23.06.2026 06:21:59 | Хабр

Покой как фича: анти-шагомер на Expo, который ругает за активность
23.06.2026 06:00:33 | Хабр

Как вырасти до мидла: на что на самом деле смотрят тимлиды при оценке DevOps-инженеров
23.06.2026 05:58:15 | Хабр

Браузер как платформа — офисные инструменты и IT-утилиты без сервера, без установки, без регистрации
23.06.2026 05:50:10 | Хабр

Смотреть все

НОВОСТИ

Стало известно, на каких машинах сконцентрируется марка Volga
24.06.2026 17:40:00 | За рулем

В Минфине сообщили об обсуждении с маркетплейсами токенизации товаров на складах
23.06.2026 14:14:43 | ТАСС

Реваншизм в Европе и ответ на угрозы в адрес Минска. Заявления Лаврова
23.06.2026 14:14:25 | ТАСС

«Не волноваться и не беспокоиться»: Лукашенко успокоил жителей Гомельщины на фоне угроз Зеленского
23.06.2026 14:14:24 | Life.ru

Оман и Иран создадут группу для обсуждения управления судоходством в Ормузском проливе
23.06.2026 14:13:10 | ТАСС

Россиянам раскрыли эффективность присадок для топлива в таблетках и баллонах
23.06.2026 14:13:09 | Lenta.ru

Россиянин хотел вывезти из страны стратегически важные товары
23.06.2026 14:12:24 | Lenta.ru

«Решительно бороться»: Путин выступил перед выпускниками силовых вузов с важным наказом
23.06.2026 14:11:24 | Life.ru

Подполковник заявил о вогнанной в паралич Украине из-за нефтебазы в Запорожье
23.06.2026 14:10:56 | Lenta.ru

Лавров заявил о готовности возобновить переговоры по Украине в любой момент
23.06.2026 14:09:22 | Life.ru

Число раненных при ударе ВСУ по автобусу в Горловке 22 июня увеличилось до 18
23.06.2026 14:08:25 | ТАСС

На Украине высказались о возможности угрозы со стороны Белоруссии
23.06.2026 14:08:10 | Lenta.ru

Внешность Вали Карнавал на новом видео описали фразой «от оригинала ничего не осталось»
23.06.2026 14:08:08 | Lenta.ru

Генсек СНГ оценил угрозы Зеленского в адрес Белоруссии
23.06.2026 14:08:05 | Lenta.ru

Названо преимущество новой СВЧ
23.06.2026 14:07:46 | Lenta.ru

Вместо Зеленского в Гданьск приедет Свириденко на фоне конфликта Польши и Украины
23.06.2026 14:07:30 | ТАСС

Бык сбежал от мясника и покалечил трех человек
23.06.2026 14:07:16 | Lenta.ru

В Чехии водителю грозит три года тюрьмы за символику Z
23.06.2026 14:07:00 | Российская Газета

Только место занимают: «Роскачество» назвало продукты, которые нельзя держать в холодильнике
23.06.2026 14:06:45 | Life.ru

Только место занимают: Роскачество назвало продукты, которые нельзя держать в холодильнике
23.06.2026 14:06:45 | Life.ru

Еврокомиссар Кубилюс: ЕС истратит €7 трлн на оружие, чтобы обогнать Россию
23.06.2026 14:06:34 | ТАСС

Ослабление рубля к доллару объяснили
23.06.2026 14:06:30 | Lenta.ru

В Чечне стартовали кампании по выборам главы и парламента региона
23.06.2026 14:05:52 | ТАСС

Путин дал совет выпускникам военных вузов
23.06.2026 14:05:40 | ТАСС

Стало известно о планах народного артиста Ножкина посетить Курск незадолго до смерти
23.06.2026 14:05:38 | Lenta.ru

Путин поздравил выпускников военных вузов
23.06.2026 14:05:38 | ТАСС

Армия Израиля заявила, что ударила по югу Ливана "для устранения угрозы"
23.06.2026 14:05:25 | ТАСС

Белоусов: Армия России внедряет ИИ и робототехнические комплексы
23.06.2026 14:05:21 | Life.ru

Крупко назвал угрозы Зеленского попыткой "сбить волну" после атаки на автобус
23.06.2026 14:05:00 | Российская Газета

ВЦИОМ: половина россиян считает, что песни должны отвечать общественным нормам
23.06.2026 14:04:19 | ТАСС

Минпросвещения: количество детских лагерей в РФ выросло на 2 тыс. за пять лет
23.06.2026 14:04:02 | ТАСС

В МИД России сделали заявление о переговорах с ЕС
23.06.2026 14:03:49 | Lenta.ru

Бывший волейболист сборной России пригрозил жене расправой
23.06.2026 14:03:37 | Lenta.ru

На Урале похищавшим деньги пенсионеров курьерам смягчили приговор
23.06.2026 14:02:48 | ТАСС

Путин объяснил, как фронт помогает быстро дорабатывать российское оружие
23.06.2026 14:02:45 | Life.ru

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro