Операция выполнена!

info@vsetut.pro

Стать автором

Вернуться

[Перевод] Как Uber масштабировал репликацию данных, чтобы ежедневно перемещать петабайты

15.02.2026 12:45:13 | Хабр

Хабы: Программирование, Data Engineering, IT-инфраструктура, Анализ и проектирование систем, Высоконагруженные системы

Uber держит огромные объёмы данных сразу в своих дата-центрах и в облаке, поэтому их нужно постоянно и быстро копировать между регионами для аналитики и аварийного восстановления.

Когда объём таких копирований вырос до петабайта в день, оказалось, что система тормозит не на самой передаче данных, а на подготовке задач и служебных накладных расходах. Команда переработала процесс так, чтобы тяжелая подготовительная рутина выполнялась ближе к месту запуска задач, а ключевые этапы шли параллельно.

Для маленьких копирований они убрали лишние запуски отдельных процессов/контейнеров, чтобы не тратить время на старт пустой работы. В итоге пропускная способность репликации выросла примерно в 5 раз и стала стабильнее, а перенос данных в облако пошёл заметно быстрее

Читать далее

Подробнее

Читайте также

HackTheBox. Прохождение Bashed. Для новичков. Ультра-легкий
15.02.2026 12:42:00 | Хабр

Мобильная разработка за неделю #619 (9 — 15 февраля)
15.02.2026 12:29:21 | Хабр

Почему я бросил шарпы?
15.02.2026 12:15:52 | Хабр

А был ли токен: как лопнул пузырь NFT и что от него осталось
15.02.2026 11:48:55 | Хабр

Закат эпохи: провайдеры окончательно отказываются от dial-up и 3G, но ряд идей в основе технологий обретают новую жизнь
15.02.2026 11:37:49 | Хабр

Тестируем популярные нейронки на одном промпте
15.02.2026 11:31:35 | Хабр

Как я строил бэкенд с ментальностью фронтендера: история одного провала
15.02.2026 11:30:46 | Хабр

Интерактивные истории с ИИ
15.02.2026 11:21:24 | Хабр

Почему надо следить за задачами
15.02.2026 11:15:38 | Хабр

Как я сделал рабочий pgAdmin4 Desktop для Arch Linux и почему это оказалось сложнее, чем кажется
15.02.2026 10:20:31 | Хабр

Нейросеть Nano Banana (Gemini): как использовать в России, готовые промпты и идеи для генерации
15.02.2026 09:58:03 | Хабр

[Перевод] Как Microsoft подготовила себя к провалу в AI
15.02.2026 09:56:48 | Хабр

Как узнать Telegram ID: пользователя, чата, канала или бота
15.02.2026 09:23:57 | Хабр

[Перевод] Физик проанализировала более 100 000 «исправленных» багов ядра Linux
15.02.2026 09:14:25 | Хабр

[Перевод] Как разработчик взломал умные пылесосы DJI Romo и научился управлять ими с помощью геймпада PS5
15.02.2026 09:07:21 | Хабр

Механическая вселенная и свобода воли
15.02.2026 09:01:16 | Хабр

Ultra Ethernet: что это за технология и зачем она нужна дата-центрам
15.02.2026 08:00:08 | Хабр

vCISO — это сотрудник или услуга?
15.02.2026 08:00:06 | Хабр

Java Rock Stars Meetup к нам приходит
15.02.2026 08:00:06 | Хабр

Сплит-клавиатура Lily58 Pro: как я сделал ее беспроводной. Пайка, GitHub и аккумуляторы
15.02.2026 08:00:04 | Хабр

Знакомство с BLE. Модуль HM-10
15.02.2026 07:49:45 | Хабр

Эволюция ПО в разработке игр на практике: 1982 — IBM PC
15.02.2026 07:24:44 | Хабр

Как работает реклама в интернете простыми словами
15.02.2026 07:16:22 | Хабр

SDD (Spec-Driven Documentation) – фреймворк для разработки технической документации в репозитории
15.02.2026 07:00:16 | Хабр

Я добавил трейты и указатели в свой язык
15.02.2026 06:27:37 | Хабр

9 вещей, которые я понял, анализируя рынок робототехники в этом году
15.02.2026 06:22:04 | Хабр

Товарный знак в 2026 году: стратегический подход для опытных предпринимателей
15.02.2026 06:10:07 | Хабр

Почему я до сих пор верю в воздушное охлаждение
15.02.2026 06:01:03 | Хабр

Своя байт-код VM, шейдеры и 3 килобайта на всё: как я создавал игру за 7 дней
15.02.2026 05:15:58 | Хабр

[Перевод] Возможно, самый гениальный код на python на сегодня: разбираем 200-строчный microgpt от Андрея Карпаты
14.02.2026 22:10:14 | Хабр

«Asda — новый Tinder»: в соцсетях «завирусилась» рекламная кампания супермаркета, который добавил в зал корзины красного цвета для тех, кто ищет пару
14.02.2026 21:55:28 | vc.ru

Чат-бот с генеративным AI под капотом (разговаривает как живой)
14.02.2026 21:37:14 | Хабр

Хочу все знать
14.02.2026 19:57:16 | Хабр

Как выбирать правильно: быстрая оценка масштаба пользовательского интерфейса цифрового продукта
14.02.2026 19:48:03 | Хабр

Как организовать отчёты менеджеров по продажам в Google Таблицах и собирать данные в общие сводки
14.02.2026 19:37:51 | Хабр

Смотреть все

НОВОСТИ

МИД Ирана заявил о поддержке прекращения огня в Ливане
16.04.2026 23:38:39 | ТАСС

Delo: в Словении правые близки к созданию правительства меньшинства
16.04.2026 23:37:15 | ТАСС

В Люберцах возбудили дело после убийства из-за квартиры
16.04.2026 23:36:08 | Коммерсантъ

В силовых структурах РФ заявили о схеме отмывания средств через мэра Харькова
16.04.2026 23:34:44 | Life.ru

Президент: Румыния находится в начале политического кризиса
16.04.2026 23:34:26 | ТАСС

Ивлеева назвала свои ягодицы выжатыми тряпками
16.04.2026 23:34:16 | Lenta.ru

В Харькове произошел взрыв
16.04.2026 23:32:30 | ТАСС

Орбан сожалеет, что строительство АЭС «Пакш-2» не началось раньше
16.04.2026 23:29:46 | Life.ru

Трамп кратко прокомментировал атаку на Киев
16.04.2026 23:27:06 | Life.ru

Редкого белого воробья сняли на видео в Петербурге
16.04.2026 23:23:29 | Lenta.ru

Bloomberg: крупнейший НПЗ Африки довел поставки топлива в Европу до 50 тыс. б/с
16.04.2026 23:22:22 | ТАСС

Названо место захоронения праха Плисецкой и Щедрина
16.04.2026 23:16:00 | Lenta.ru

Фицо: Русские встают на колени только в одном случае — чтобы завязать шнурки
16.04.2026 23:15:06 | Life.ru

ЦАХАЛ заявил, что наносит удары по ракетным установкам в Ливане
16.04.2026 23:14:33 | ТАСС

ЦАХАЛ наносит удары по ракетным установкам в Ливане
16.04.2026 23:14:33 | ТАСС

На севере Эстонии нашли обломки дрона
16.04.2026 23:14:00 | Lenta.ru

На Украине забили тревогу из-за планов ВС России в Донецкой области
16.04.2026 23:14:00 | Lenta.ru

В аэропорту Геленджика ввели временные ограничения
16.04.2026 23:13:40 | ТАСС

Мединский отметил бессознательную германизацию в одном российском регионе
16.04.2026 23:12:00 | Lenta.ru

Госдеп: Израиль сохранит права "по самообороне", несмотря на перемирие с Ливаном
16.04.2026 23:09:04 | ТАСС

31-летний российский актер рассказал о жизни в деревне с бабушкой
16.04.2026 23:08:10 | Lenta.ru

На Украине массово закрываются кафе и рестораны на фоне постоянных убытков
16.04.2026 23:08:03 | ТАСС

В аэропорту Сочи ввели временные ограничения
16.04.2026 23:06:02 | ТАСС

Захарова прокомментировала идею заменить русский мат на украинский
16.04.2026 23:06:00 | Российская Газета

Раскрыта зависимость Пентагона от SpaceX
16.04.2026 23:04:00 | Lenta.ru

Мужчину, выпившего перекись водорода, спасли в больнице Сергиева Посада
16.04.2026 23:03:28 | Life.ru

Новый трейлер Hell Let Loose: Vietnam рассказал о бета-тестировании и геймплее
16.04.2026 23:03:22 | PlayGround.ru

Ремейк Mafia 2 уже в разработке сообщил инсайдер
16.04.2026 23:00:36 | PlayGround.ru

Лукашенко назвал игру минского «Динамо» паршивой
16.04.2026 22:57:25 | Life.ru

В Словакии высказались о возможности поставить русских на колени
16.04.2026 22:55:25 | Lenta.ru

В Европе дефицит авиатоплива. Есть ли риск сокращения полетов
16.04.2026 22:54:21 | РБК

В Орловской области объявили опасность атаки БПЛА
16.04.2026 22:53:49 | ТАСС

Time опубликовал список 100 самых влиятельных людей 2026 года
16.04.2026 22:51:03 | РБК

Александр Овечкин озвучил желание подписать двухлетний контракт с «Вашингтоном»
16.04.2026 22:50:53 | Life.ru

Gigabyte представила технологию T-Guard для защиты видеокарт от перегрева кабелей 12V-2x6
16.04.2026 22:50:31 | PlayGround.ru

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro

Copyright © 2026 - vsetut.pro