Kaggle Benchmarks. «Kaggle уже не тот...»

19.04.2026 19:57:23 | Хабр

Хабы: Искусственный интеллект, Машинное обучение, Хакатоны

В ML/DS сообществе есть шаблонная фраза “Kaggle уже не тот”. Ностальгия по временам ушедшим понятна, но в общем-то очевидно, что драматически меняется вся индустрия и ландшафт соревнований вместе с ним. На смену заголовку, встречавшему кагглеров раньше, “Your Home for Data Science” пришел новый: “The World's AI Proving Ground”.

Бенчмарки на Kaggle

В 2026 Kaggle окончательно перешел под крыло AI фронтьера от Google DeepMind. Сменился и фокус. Один из больших апдейтов - появление раздела "Benchmarks" и инструментария Kaggle Benchmarks SDK. Вкратце, это фреймворк + инфраструктура, которые позволяют создавать наборы тестов на любой вкус, объединять их в комплексные бенчмарки и быстро прогонять на них большие модели в равных условиях. Можно придумать и реализвать почти любой тест, метрику и механику его прогона. Тесты можно объеденить в группу и уже эта сущность и будет называться бенчмарком. На выходе будут логи, json, метрики, сравнения, лидерборд. И данные, и код бенчмарков можно оставить в приватном датасете, не доступном публично, а можно раскрыть.

Подробнее

Читайте также

«Яндекс Такси» запустит более тысячи роботакси
19.04.2026 19:42:57 | ferra.ru

В Ленинградской области первыми в России начали обращаться в МФЦ без паспорта
19.04.2026 19:33:55 | ferra.ru

Умный подоконник: как ESP32 спас мой домашний огород (и что я узнал про «невидимые» пины)
19.04.2026 19:30:34 | Хабр

Успешный экспорт бага: взгляд клинициста на галлюцинации ИИ
19.04.2026 18:49:18 | Хабр

IT-Weekly: VPN добьют ценой; приватизацию защитят сроками давности; цензура для ИИ
19.04.2026 18:48:55 | it-world

Российские ученые ускорили засыпание детей с помощью пения птиц
19.04.2026 18:35:19 | ferra.ru

Минюст США отказался помогать Франции в уголовном расследовании против соцсети X
19.04.2026 18:31:28 | ferra.ru

Tesla объявила о запуске сервиса роботакси в американских Хьюстоне и Далласе
19.04.2026 18:27:17 | vc.ru

Я превратил вырез в экране MacBook в динамический элемент пользовательского интерфейса (DynamicNotch для macOS)
19.04.2026 18:15:51 | Хабр

Как вендор заменил треть сеньоров на джунов
19.04.2026 17:48:41 | Хабр

«А трактор случайно не в залоге?» — история одной интеграции с ФЦИИТ
19.04.2026 17:45:37 | Хабр

Сказать или не сказать — вот в чём вопрос?
19.04.2026 17:23:47 | Хабр

[Перевод] OpenAI выкупила Sky – теперь в Codex лучшая система управления компьютером, которую я видел
19.04.2026 17:23:24 | Хабр

Как сейчас оплатить Claude AI в России без лишних усилий
19.04.2026 17:20:44 | Хабр

Cказ о том, как мы с Oracle на PostgreSQL переехали
19.04.2026 17:15:20 | Хабр

Сеть кофеен Cofix ведёт переговоры о продаже российского бизнеса — «Ъ»
19.04.2026 17:14:15 | vc.ru

В Липецке открылся первый Бизнес ГигаХаб для обучения работе с ИИ
19.04.2026 16:57:50 | ferra.ru

Иллюзия точности метрик: о чем не принято говорить в «высоком обществе» BI-аналитиков
19.04.2026 16:50:46 | Хабр

Все риски биткоина в одном месте
19.04.2026 16:45:13 | Хабр

[Перевод] То, с чем не сталкивался в детстве, может быть опасным
19.04.2026 16:16:09 | Хабр

Как приложения скрывают окна от захвата экрана: SetWindowDisplayAffinity, ScreenCaptureKit и что сломалось в macOS 15
19.04.2026 16:16:02 | Хабр

Нейросети для генерации текста: Топ-5 нейросетей для создания текстов в 2026 году
19.04.2026 16:10:04 | Хабр

Нейросети для генерации музыки: ТОП-4 лучшие нейросети для песен, саундтреков и озвучки текста
19.04.2026 16:05:29 | Хабр

В России откроют центр ионно-лучевой терапии для лечения рака
19.04.2026 16:05:08 | ferra.ru

[Перевод] Сможем ли мы сделать виртуальную жизнь на компьютере
19.04.2026 15:56:04 | Хабр

Как я изобрёл велосипед: создание языка программирования с нуля ради одной игры и Telegram-бота
19.04.2026 15:45:59 | Хабр

Домашний Netflix за вечер: Transmission + Jellyfin + Telegram-бот на Docker с поддержкой NAS
19.04.2026 15:34:47 | Хабр

Гуманоидные роботы обогнали людей на полумарафоне в Пекине
19.04.2026 15:28:10 | ferra.ru

Интеграция Google Gemini API в асинхронный Telegram-бот на aiogram 3.x и Python
19.04.2026 15:15:44 | Хабр

13 предпринимательских уроков из советской сатиры, которую вы читали не так
19.04.2026 15:04:05 | Хабр

Деконструкция GO: CPU, RAM и что там происходит. Reordering, atomics, locks, fences. Часть 1.3
19.04.2026 14:59:04 | Хабр

Стратегия развития ИИ в РФ: как пишут стратегии, когда горизонт планирования не больше года
19.04.2026 14:56:05 | Хабр

Опыт разработки picows: самые быстрые вебсокеты для asyncio
19.04.2026 14:46:40 | Хабр

Робот от Honor выиграл пекинский полумарафон среди человекоподобных роботов и побил мировой рекорд среди людей
19.04.2026 14:30:22 | vc.ru

Как я убрал чаты из оформления заявок на бетонном заводе: Bitrix24, 1С и отдельное приложение
19.04.2026 14:26:46 | Хабр

Смотреть все

НОВОСТИ

Расписание ЕГЭ и ОГЭ 2026: полный календарь экзаменов для 9-х и 11-х классов
27.04.2026 10:52:04 | Life.ru

Завершено расследование дела о жестоком убийстве экс-мэра Самары и его жены
27.04.2026 10:50:09 | Life.ru

Солдаты ВСУ зверски убили пожилую жительницу Казачьей Лопани
27.04.2026 10:48:14 | Lenta.ru

В Тюмени осудили экс-главу поселения по делу о взятках на 1,7 млн рублей
27.04.2026 10:47:59 | ТАСС

В Петербурге завершили формирование региональной деловой программы ПМЭФ
27.04.2026 10:47:13 | ТАСС

Цена нефти Brent на ICE превысила $108 впервые с 7 апреля
27.04.2026 10:47:07 | ТАСС

Семье павшего бойца СВО отказали в выплатах из-за причины смерти, вмешалась прокуратура
27.04.2026 10:46:53 | Life.ru

Китай выразил протест США из-за санкций против нефтехимической компании
27.04.2026 10:46:46 | ТАСС

Тюкавин надеется, что вклад Захарян в игру "Реал Сосьедад" будет более ощутим
27.04.2026 10:45:57 | ТАСС

Генсек ОДКБ считает, что ООН переживает тяжелейший кризис
27.04.2026 10:45:46 | ТАСС

В Татарстане в ДТП на трассе погиб подросток
27.04.2026 10:45:27 | ТАСС

Названы регионы России с самым сильным кадровым голодом
27.04.2026 10:45:10 | Life.ru

Херсон частично обесточен после взрывов
27.04.2026 10:44:58 | ТАСС

Собянин: коммунальные службы Москвы работают в усиленном режиме из-за непогоды
27.04.2026 10:44:05 | ТАСС

В Москве "Аптекарский огород" закрыли для посещения из-за непогоды
27.04.2026 10:43:56 | ТАСС

В 85 населенных пунктах Ленобласти восстановили подачу электроэнергии
27.04.2026 10:43:45 | ТАСС

В ГАИ Москвы призвали водителей к осторожности на дороге в условиях непогоды
27.04.2026 10:43:02 | ТАСС

Начался прием заявок на Всероссийский конкурс лучших практик трудоустройства молодежи
27.04.2026 10:42:42 | ТАСС

Около 200 домов получили точечный урон после атаки ВСУ на Севастополь
27.04.2026 10:42:20 | ТАСС

Власти Москвы регулярно поставляют 1430-му гвардейскому мотострелковому полку оборудование
27.04.2026 10:42:09 | ТАСС

Авиакомпании Европы повысили цены на услуги для компенсации расходов на топливо
27.04.2026 10:42:00 | Российская Газета

На «Госуслугах» появится кнопка для жалобы на ошибки с VPN
27.04.2026 10:41:54 | Life.ru

Размытая взлетная полоса в российском аэропорту попала на видео
27.04.2026 10:41:43 | Lenta.ru

Оставленный в метро Москвы патрон помог задержать подозреваемого
27.04.2026 10:41:20 | ТАСС

ВТБ снизил первый взнос по рыночной ипотеке на ИЖС до 20,1%
27.04.2026 10:40:25 | ТАСС

В Москве непогода не стала поводом для отмены занятий в школах
27.04.2026 10:40:22 | ТАСС

В Подмосковье на автодороги упало 30 деревьев
27.04.2026 10:40:09 | ТАСС

Ekonomim: в Турции отели могут закрыть из-за новых требований пожарной безопасности
27.04.2026 10:40:06 | ТАСС

Отец с дочкой чуть не сгорели в заискрившемся лифте петербургского ЖК
27.04.2026 10:39:45 | Life.ru

У Буданова на столе заметили красный «Список пидорасов 2026»
27.04.2026 10:39:29 | Lenta.ru

В Киевской области из-за непогоды без света остались 110 населенных пунктов
27.04.2026 10:38:44 | ТАСС

В Дагестане три участка дорог остаются закрытыми после непогоды
27.04.2026 10:38:33 | ТАСС

Глава МИД Ирана обсудил возможное продолжение переговоров с США в Пакистане
27.04.2026 10:38:31 | Life.ru

В Волгограде простятся с полковником МЧС и его женой, погибшими при атаке БПЛА
27.04.2026 10:38:00 | ТАСС

ФНТР ведет работу по полноценному возвращению россиян на европейские турниры
27.04.2026 10:37:49 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro