Очередь на Redis с Lua: порядок в партициях, общий пул воркеров и отложенные сообщения

01.04.2026 18:16:06 | Хабр

Хабы: Go, Lua

Перед командой встала типичная для высоконагруженных сервисов постановка по обработке сообщений:

1. Порядок обработки в рамках одной логической партиции

2. Очень много ключей партиций

3. Ограниченный пул воркеров, который шарится между партициями, при этом одна тяжёлая партиция не должна блокировать остальные

4. Ретраи и отложенные сообщения

Ни одна готовая «одна технология» не закрывает это из коробки без компромиссов. Ниже — как мы к этому пришли и что в итоге сделали в виде библиотеки smart-redis-queue (очередь на Redis, логика в Lua-скриптах).

Подробнее

Читайте также

Tesla признала: роботакси иногда управляет человек
01.04.2026 18:15:28 | ferra.ru

[Перевод] 10 триллионов параметров и статус «слишком опасна»: что мы знаем о Claude Mythos
01.04.2026 18:13:03 | Хабр

Банки будут требовать обновить данные через Госуслуги. Что грозит за игнорирование?
01.04.2026 18:05:00 | ferra.ru

Неизвестные угнали грузовик KitKat с 12 тоннами батончиков — как сама компания и другие бренды от KFC до Microsoft шутят над ситуацией
01.04.2026 17:51:36 | vc.ru

От вайб-кодинга к вайб-охране кода: что делать прямо сейчас
01.04.2026 17:51:22 | Хабр

Один хеш, вместо миллиона проверок: пишем Merkle Tree на Go с нуля
01.04.2026 17:46:02 | Хабр

Инсайдер показал рендер смартфона Google Pixel 11, но людей больше беспокоит цена
01.04.2026 17:43:56 | ferra.ru

В Ухани произошёл массовый сбой в работе сервиса роботакси Apollo Go от Baidu — из строя вышли более 100 машин
01.04.2026 17:27:25 | vc.ru

Фрактальная архитектура Вселенной: матрёшка вложенных миров и универсальный закон
01.04.2026 17:26:18 | Хабр

[Перевод] Мета-теория связей 0.0.3
01.04.2026 17:26:10 | Хабр

Россиян начал атаковать троян CrystalX, через который хакеры насмехаются над жертвой
01.04.2026 17:20:00 | ferra.ru

Spring, kafka, неблокирующий retry, лаги
01.04.2026 17:15:56 | Хабр

Студенты из Грозного создали модуль для дрона для распыления удобрений
01.04.2026 17:11:22 | ferra.ru

Вся музыка, все фотографии и весь Wi-Fi работают на одном трюке. Ему 200 лет
01.04.2026 17:09:45 | Хабр

Алиса AI научилась определять запахи на фотографиях
01.04.2026 16:58:14 | ferra.ru

Российские учёные назвали найденного в Белом море червя в честь собаки
01.04.2026 16:35:00 | ferra.ru

Асинхронное логирование в C++ — не серебряная пуля: что на самом деле ограничивает производительность
01.04.2026 16:20:11 | Хабр

Google запустила проверку разработчиков приложений для Android вне Play Market
01.04.2026 16:15:29 | ferra.ru

Путин призвал внедрять цифровые платформы для транспорта
01.04.2026 16:06:40 | ferra.ru

Новый чип памяти будет работать при температуре вулканической лавы
01.04.2026 15:50:31 | it-world

Новый чип памяти сможет работать при температуре вулканической лавы
01.04.2026 15:50:31 | it-world

В Тольятти усталость металла научились определять по «геометрии хаоса»
01.04.2026 15:50:00 | ferra.ru

Раньше я не писал на Хабр, а теперь у меня появился Телеграм-канал и я пишу об очень важной новости про OpenAI
01.04.2026 15:49:20 | Хабр

Российские ученые создали технологию, а основе рентгена для повышения нефтедобычи
01.04.2026 15:46:21 | ferra.ru

Эмулятор Nintendo 3DS на ПК Tanuki3DS получил большое обновление
01.04.2026 15:43:57 | ferra.ru

Актуальная к 1-му апреля информация о паллиативной помощи
01.04.2026 15:34:18 | Хабр

Как я уместил «Войну и мир» в 10 ГБ видеопамяти, или почему нейросеть убивает героев и выдумывает Пьера Бездаровского
01.04.2026 15:28:39 | Хабр

Протоколы, чтобы ИИ-агенты нашли общий язык
01.04.2026 15:27:44 | Хабр

Топ-6 нейросетей для генерации и редактирования изображений
01.04.2026 15:20:34 | Хабр

Как «несуществующие» фотоны влияют на сверхпроводимость
01.04.2026 15:18:33 | Хабр

Одностраничный сайт на Next.js с навигацией по якорям
01.04.2026 15:08:59 | Хабр

В России из глицерина сделали абсорбент для улавливания углекислого газа
01.04.2026 15:05:00 | ferra.ru

Делегирование для тимлида: как перестать быть главным исполнителем и не скатиться в микроменеджмент
01.04.2026 14:52:30 | Хабр

Как найти UB, которое никто не хочет замечать: разбираем clang-tidy изнутри
01.04.2026 14:52:27 | Хабр

Evil Merge: как малварь пряталась в git merge-коммите 3,5 месяца
01.04.2026 14:46:22 | Хабр

Смотреть все

НОВОСТИ

Ольховский считает, что Даниил Медведев много ошибался в матче против Мериды
01.07.2026 20:23:32 | ТАСС

Замглавы МИД РФ принял председателя 43-й сессии Генеральной конференции ЮНЕСКО
01.07.2026 20:23:06 | ТАСС

Только 3% украинцев доверяют депутатам Верховной рады, показал опрос
01.07.2026 20:22:40 | Life.ru

Марк Эйдельштейн с голым торсом снялся для рекламы
01.07.2026 20:20:57 | Lenta.ru

Футболист "Зенита" Нино не знает про интерес со стороны испанских клубов
01.07.2026 20:20:13 | ТАСС

ТВ: В Монако задержали иностранца по делу о покушении на Ермолаева
01.07.2026 20:19:00 | Российская Газета

Постпред США при НАТО заявил, что итоговое коммюнике саммита удивит содержанием
01.07.2026 20:18:35 | Life.ru

Sony прекратит выпускать диски для PlayStation
01.07.2026 20:18:04 | Lenta.ru

Следователи возбудили дело после обнаружения в реке тела звезды «Бригады»
01.07.2026 20:18:01 | Lenta.ru

Breaking Defense: Хегсет создал должность ответственного за беспилотники
01.07.2026 20:17:00 | Российская Газета

Четыре человека пострадали под Курском при атаке ВСУ
01.07.2026 20:16:21 | ТАСС

В Германии украли памятник Пушкину
01.07.2026 20:16:16 | Lenta.ru

Британские гангстеры облюбовали еще одну европейскую страну
01.07.2026 20:16:11 | Lenta.ru

Школьника удалили с ЕГЭ за использование умных очков
01.07.2026 20:15:11 | Lenta.ru

«Азербайзан... джан»: Фон дер Ляйен повторила ошибку Трампа
01.07.2026 20:15:06 | Life.ru

Марочко: ВС РФ активизировались на волчанском направлении
01.07.2026 20:15:00 | ТАСС

В Киеве после срабатывания воздушной тревоги прогремели взрывы
01.07.2026 20:14:36 | Life.ru

ФАС выдала Apple предупреждение о возможном штрафе в четыре миллиарда рублей
01.07.2026 20:14:30 | Lenta.ru

На Западе оценили перспективы раскола НАТО из-за Украины
01.07.2026 20:14:01 | Lenta.ru

Эксперт Герейханова: медиа должны отвечать на запрос молодежи, сохраняя глубину
01.07.2026 20:13:38 | ТАСС

«Все пойдёте на мясо»: Экс-советник Кучмы предупредил украинцев из-за терпения к людоловам Зеленского
01.07.2026 20:13:22 | Life.ru

На Украине заявили о шестикратном росте темпов продвижения ВС РФ
01.07.2026 20:11:47 | Lenta.ru

Чернышенко призвал регионы закупать автобусы с ручным управлением для ветеранов СВО
01.07.2026 20:10:22 | ТАСС

Ольховский назвал героической победу Сафиуллина во втором круге Уимблдона
01.07.2026 20:08:50 | ТАСС

Выплаты по ОСАГО в России вырастут на 8–9% после обновления цен на запчасти
01.07.2026 20:08:00 | Life.ru

На Волге в Нижегородской области теплоход с пшеницей сел на мель
01.07.2026 20:07:40 | ТАСС

В Марий Эл назвали причину возможных перебоев с топливом на АЗС республики
01.07.2026 20:06:50 | ТАСС

ИРИ объявил победителей конкурса на создание национального контента
01.07.2026 20:06:35 | ТАСС

Польша вновь разозлилась на Украину
01.07.2026 20:04:15 | Lenta.ru

В Россию везут индийский бензин. Чем он отличается от российского и как его оценивают эксперты?
01.07.2026 20:04:03 | Lenta.ru

Вэнс не исключил возможность возобновления военных действий США против Ирана
01.07.2026 20:03:52 | ТАСС

Раскрыты новые детали расследования по «Северным потокам»
01.07.2026 20:02:45 | Lenta.ru

Четыре отеля снесли в Индии из-за изнасилованной в них 13-летней девочки
01.07.2026 20:02:18 | Lenta.ru

В московском Театре на Юго-Западе прошел концерт ко Дню ветеранов боевых действий
01.07.2026 20:01:59 | ТАСС

Импорт российского газа в ЕС вырос на 7%, несмотря на введённый запрет
01.07.2026 20:01:41 | Life.ru

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro