Как мы сократили объем данных в 10 раз, не повредив пользовательскому опыту, или переезд Postgres → ClickHouse

24.01.2026 13:20:13 | Хабр

Хабы: Блог компании KTS, DevOps, PostgreSQL, Веб-разработка, Python

Всем привет, меня зовут Алексей Леонтьев, я техлид и архитектор на проекте Smartbot в компании KTS. Smartbot — это nocode-платформа для настройки сценариев чат-ботов, которые могут работать в нескольких соцсетях и мессенджерах одновременно.

Мы храним много данных о событиях, которые обрабатывает наша платформа. Раньше для этого мы использовали Postgres. Но возникла задача сократить потребляемые кластером ресурсы.

В этой статье я расскажу о том, как мы бесшовно перенесли данные из Postgres в ClickHouse. И при этом сократили оперативную память в 4 раза, а размер потребляемого дискового пространства — на порядок.

Подробнее

Читайте также

Бустер для мозга. Projects в Claude. Методологическая магия
24.01.2026 13:20:10 | Хабр

[Перевод] Искусственный интеллект не становится умнее. Мы становимся глупее
24.01.2026 13:16:24 | Хабр

От пустоты к идее: как я создал свою первую доску вдохновения
24.01.2026 13:01:39 | Хабр

Армения усложнит процедуру получения ВНЖ и ПМЖ
24.01.2026 12:32:06 | vc.ru

Креативные методы поиска идей для ИИ-стартапов
24.01.2026 12:22:29 | Хабр

От идеи до публикации: разбор контент-завода с Sora 2 на n8n
24.01.2026 12:21:04 | Хабр

[Перевод] Новые доказательства того, что древний марсианский океан покрывал половину планеты
24.01.2026 12:00:32 | Хабр

[Перевод] Стив Фриман, Нэт Прайс, Тим Маккиннон, Джо Уорнc «Мокируем роли, а не объекты»
24.01.2026 11:53:14 | Хабр

Microsoft дала ФБР ключи BitLocker для разблокировки ноутбуков подозреваемых
24.01.2026 11:51:14 | ferra.ru

Змеиный яд, зарин и антидепрессанты
24.01.2026 11:30:26 | Хабр

День 1431: импорт золота из России в Китай в 2025 году достиг рекордных значений
24.01.2026 11:14:42 | vc.ru

Обзор книги «Проектное управление. Как правильно делать правильные вещи», Павел Алферов
24.01.2026 11:14:04 | Хабр

PostgreSQL для CDC-пайплайна: настраиваем logical replication за 30 минут
24.01.2026 11:01:18 | Хабр

Как проверять продуктовые гипотезы без A/B-тестов? Практические альтернативы
24.01.2026 10:27:27 | Хабр

[Перевод] Туториал по Wireshark для начинающих
24.01.2026 10:26:08 | Хабр

PG_EXPECTO: влияние vm.vfs_cache_pressure на производительность PostgreSQL при нагрузке, имитирующей OLAP
24.01.2026 10:17:46 | Хабр

PG_EXPECTO 5.2: влияние vm.vfs_cache_pressure на производительность PostgreSQL при нагрузке, имитирующей OLAP
24.01.2026 10:17:46 | Хабр

Оказалось, еженедельно более 230 млн человек делятся с ChatGPT медицинскими данными
24.01.2026 09:51:12 | ferra.ru

Сколько стоит современная ностальгия. Смотрим, как оживляют старые консоли и какие деньги на это тратят
24.01.2026 09:20:48 | Хабр

Почему не взлетели дирижабли? Часть 6: Лондон под бомбами
24.01.2026 09:01:44 | Хабр

Специалисты прояснили слухи о пропаже Dynamic Island в будущих iPhone 18 Pro
24.01.2026 08:21:22 | ferra.ru

[Перевод] Между жизнью и смертью существует «третье состояние» — и, возможно, поэтому наши клетки обладают сознанием
24.01.2026 08:06:23 | Хабр

Как медь стала узким местом для ЦОД и энергетики и что с этим делать
24.01.2026 08:00:12 | Хабр

[Перевод] Что такое Skills, Prompts, Projects, MCP и сабагенты? База для понимания агентной экосистемы
24.01.2026 07:47:12 | Хабр

Как кубик Рубика влияет на мозг: развитие нейропластичности и когнитивных способностей
24.01.2026 07:30:03 | Хабр

Введение в DAST, SAST, SCA, IAST и RASP: Гид по инструментам безопасности
24.01.2026 07:29:18 | Хабр

Новый VPN-протокол TrustTunnel спасет нас
24.01.2026 07:27:38 | Хабр

Zorin OS и эффект Windows 10: почему миграция на Linux вдруг стала массовой
24.01.2026 07:00:48 | Хабр

[Перевод] 8 способов как попасть в поиск ChatGPT в 2026 году. Я выписал главное из лекции Нила Пателя
24.01.2026 06:25:41 | Хабр

PM vs PM в IT: двойной внутренний конфликт
24.01.2026 06:13:31 | Хабр

Краткая история подшипника: от разработок Тимкена до инноваций Баббита
24.01.2026 06:08:24 | Хабр

Что мы считаем, когда считаем эффективность: от парового двигателя до нейросетей
24.01.2026 03:50:28 | Хабр

Как мы продавали компьютеры в 90-х. Часть #01
24.01.2026 03:44:07 | Хабр

Epic и Google заключили тайную сделку на $800 млн
23.01.2026 23:21:29 | ferra.ru

Оно обязательно сломается: не «если», а «когда»
23.01.2026 22:33:32 | Хабр

Смотреть все

НОВОСТИ

Мошенники стали обманывать россиян под еще одним предлогом
21.04.2026 15:09:23 | Lenta.ru

Американский военный самолет подлетел к Ирану
21.04.2026 15:09:12 | Lenta.ru

В Башкирии "Бессмертный полк" пройдет в онлайн-режиме
21.04.2026 15:09:00 | ТАСС

Российские и китайские налоговики договорились обмениваться опытом
21.04.2026 15:09:00 | Lenta.ru

Людмила Бабушкина отметила значимость Евразийского экономического форума молодежи
21.04.2026 15:08:53 | ТАСС

РЕН ТВ: задержана топ-менеджер «Эксмо» Александра Шипетина
21.04.2026 15:07:53 | Коммерсантъ

Экс-альпинист раскрыл, от чего на самом деле могли погибнуть туристы на опасном пике Мунку-Сардык
21.04.2026 15:07:40 | Life.ru

В номере вологодской гостиницы установили статую солдата «Алёши»
21.04.2026 15:06:29 | Life.ru

Захарову возмутила «избирательность» ЕС в вопросе защиты прав детей
21.04.2026 15:06:20 | Life.ru

Путин заявил о непростых условиях для осенних выборов
21.04.2026 15:06:04 | Lenta.ru

Politico: Глава МИД Венгрии Сийярто пропустит заседание по кредиту ЕС для Киева
21.04.2026 15:06:00 | Российская Газета

Мошенники начали разводить мировые судоходные компании на криптовалюту
21.04.2026 15:04:56 | Lenta.ru

В Подмосковье участниками акции "Библионочь" стали 46 тыс. человек
21.04.2026 15:04:46 | ТАСС

ГД приняла закон о запрете на созданные ИИ изображения людей в агитации
21.04.2026 15:04:08 | ТАСС

Пассажиры рейса Azur Air прибыли на Пхукет после замены самолета
21.04.2026 15:04:04 | ТАСС

Гоблин разнёс риторику Запада, где военные победы России списывают на большие расстояния
21.04.2026 15:02:53 | Life.ru

Валерия Гай Германика вывела пятилетнего сына на публику в скрывающей лицо балаклаве
21.04.2026 15:02:43 | Lenta.ru

Жога наградил председателя гордумы Нижнего Новгорода
21.04.2026 15:02:41 | ТАСС

Вершившая правосудие из шезлонга российская судья заслушала приговор
21.04.2026 15:02:05 | Lenta.ru

В Лондоне слушания по тяжбе Потанина с экс-женой назначили на ноябрь
21.04.2026 15:01:33 | ТАСС

Пришельцы?! Конгресс США бьёт тревогу из-за исчезновений и смертей изучавших НЛО учёных
21.04.2026 15:01:32 | Life.ru

Умер актер Рамиль Мубинов
21.04.2026 15:01:08 | ТАСС

Путин: успех побед российского народа заключается в единстве
21.04.2026 15:00:56 | ТАСС

Три страны ЕС выступили против Израиля
21.04.2026 15:00:24 | Lenta.ru

Путин вручил директору школы из Калужской области Филонову премию "Служение"
21.04.2026 15:00:01 | ТАСС

Россияне стали спокойнее относиться к офисному дресс-коду
21.04.2026 14:59:54 | Life.ru

"Единая Россия" не поддерживает идею онлайн-взыскания долгов за ЖКУ
21.04.2026 14:59:33 | ТАСС

Детский омбудсмен Подмосковья назвала неприемлемым воспитание с опасными экспериментами
21.04.2026 14:59:33 | ТАСС

«Отец года» из Подмосковья метнул кухонный нож в живот сыну для проверки пресса
21.04.2026 14:59:12 | Life.ru

Во Франции набросились на Каллас из-за Украины
21.04.2026 14:58:45 | Lenta.ru

«Проблемная страна»: Зеленский пытается заманить ЕС в свой смертельный план
21.04.2026 14:58:32 | Life.ru

«Проблемная страна»: Зеленский пытается заманить ЕС свой в смертельный план
21.04.2026 14:58:32 | Life.ru

На Украине суд ответил Тимошенко
21.04.2026 14:58:00 | Lenta.ru

Мишустин заявил о сохранении выплаты для многодетных при превышении уровня дохода
21.04.2026 14:57:53 | ТАСС

МО РФ: освобождение Гришина улучшило положение ВС России на добропольском направлении
21.04.2026 14:57:53 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro