MELT-1: трансформер 7B сдыхает за 11 часов, а наш агент живёт 95

17.05.2026 14:21:58 | Хабр

Хабы: Анализ и проектирование систем, Искусственный интеллект, DIY или Сделай сам, IT-инфраструктура

TL;DR. Мы выкатили открытый бенчмарк MELT-1 — он меряет не сколько модель знает в идеальных условиях (MMLU & co), а сколько она проживёт под дрифтом распределения и сколько стоит держать её живой. Три оси: $/1M успешных решений, часы до деградации без ретрейна, p99-латентность сенсор→актуатор под 40 °C. 30 суток непрерывного инференса, 5 сидов, два температурных профиля, sensitivity-анализ. На closed-loop manipulation наш агент (Metabolic AI, non-transformer) против Llama-class 7B INT8 показал 9.4× по стоимости, 8.5× по выживанию под дрифтом, ~1600× композитно. Архитектура закрыта — патент на стадии экспертизы. Бенч открытый: харнесс, сцены, оракул, sensitivity-скрипты, опубликованный VAE-энкодер дрифта. Прогоните своих агентов и положите рядом. PDF с полной методологией и threats to validity — в конце статьи.

Посмотреть

Подробнее

Читайте также

А что не так с вашими миграциями? Liquibase, rollback и первые тревожные признаки
17.05.2026 14:18:10 | Хабр

Как Vision-Language Models учатся работать с 3D-миром
17.05.2026 14:05:05 | Хабр

Ил-114-300 завершил арктические испытания в условиях Крайнего Севера
17.05.2026 13:55:59 | ferra.ru

Подружитесь со своим ассистентом
17.05.2026 13:53:39 | Хабр

Китайские платформы внедрят ИИ-агентов для изменения онлайн-шопинга
17.05.2026 13:36:50 | ferra.ru

SectorOS: операционная система в пределах 512 байт
17.05.2026 13:32:25 | Хабр

Рабочие способы вывести криптовалюту в рубли в 2026 г
17.05.2026 13:07:37 | Хабр

Гэри «Соло» МакКиннон: взломать Пентагон в поисках НЛО, бесплатной энергии, и чтоб никто не ушёл обиженным
17.05.2026 13:01:55 | Хабр

Работодатели больше не верят резюме
17.05.2026 13:00:00 | it-world

Новичок дороже старожила
17.05.2026 12:55:59 | Хабр

ДОМ.РФ и Москва договорились о сотрудничестве в цифровизации строительства
17.05.2026 12:55:58 | ferra.ru

Пиратство, копирайт и DMCA: как Napster, The Pirate Bay и YouTube изменили закон. Часть I
17.05.2026 12:13:30 | Хабр

Мобильная разработка за неделю #630 (11 — 17 мая)
17.05.2026 12:12:37 | Хабр

Почему мы живем в мире правшей?
17.05.2026 11:57:10 | Хабр

Российские ученые обнаружили региональные генетические мутации у народов Кавказа
17.05.2026 11:55:56 | ferra.ru

Как управлять эволюционным поиском? На примере конечных автоматов
17.05.2026 11:52:38 | Хабр

В России создали экспресс-тест на вредный пластик в товарах
17.05.2026 10:55:55 | ferra.ru

Пульсар как антивещественный реактор. Недокументированная фича нейтронных звёзд
17.05.2026 10:17:01 | Хабр

Путь к ПМЖ после немецкого диплома: §20, Blue Card и прочие немецкие радости
17.05.2026 10:01:42 | Хабр

МакКладун или почему балансеруны не нужны
17.05.2026 09:59:24 | Хабр

В России нашли способ точнее оценивать прочность титановых деталей для авиации
17.05.2026 09:34:02 | ferra.ru

YouTube расширил доступ к инструменту поиска дипфейков
17.05.2026 09:24:36 | ferra.ru

Строительство Саркофага. Часть 1. Бетон, гранит и 1000 Р/ч: рождение «Укрытия»
17.05.2026 09:05:38 | Хабр

[Перевод] Эпоха иллюзорной продуктивности
17.05.2026 09:01:37 | Хабр

Агенты, которые играют в игры: как MMORPG обучают ИИ кооперации, предательству и дипломатии
17.05.2026 08:38:22 | Хабр

Сети База для начинающих
17.05.2026 08:19:28 | Хабр

Fake Door Test: проверить продукт, не создавая его
17.05.2026 08:09:36 | Хабр

Ask.com закрылся. Что это был за сервис? Вспоминаем 90-е
17.05.2026 08:00:26 | Хабр

Из актрисы в бизнес-аналитика: как я выбирала новую профессию, училась и искала работу
17.05.2026 07:03:16 | Хабр

Как перестать взрывать мозг оппонентам. Кошелек Миллера в межкомандных переговорах
17.05.2026 06:42:02 | Хабр

Простая волновая интерпретация гравитации и эффекта Казимира
17.05.2026 06:27:47 | Хабр

Memento mori
17.05.2026 06:24:06 | Хабр

Технологическая сингулярность и судьба человечества
17.05.2026 06:22:55 | Хабр

Аа-а-а-а. Всем хана, мы будем безработными!...???
17.05.2026 04:34:32 | Хабр

В Иннополисе создали ПО, ускоряющее программирование сварочных роботов в 3–5 раз
16.05.2026 23:45:00 | ferra.ru

Смотреть все

НОВОСТИ

Politika: Заявление Путина о распаде Украины на две части уже стало реальностью
04.08.2026 18:43:34 | Life.ru

Автогигант объявил о прекращении производства дешевых машин
04.08.2026 18:40:43 | Lenta.ru

Популярную блогершу арестовали после расправы над полицейским в отставке
04.08.2026 18:38:31 | Lenta.ru

В России назвали особенность атак ВСУ на мирное население
04.08.2026 18:38:02 | Lenta.ru

«Ответ адекватный»: В Совфеде назвали 40-дневный план Зеленского провальным для Украины
04.08.2026 18:37:15 | Life.ru

На Ленинградском вокзале открыли "экспресс-кассу"
04.08.2026 18:36:37 | ТАСС

В Томской области более 2 тыс. человек остались без электричества
04.08.2026 18:36:16 | ТАСС

В Лондоне впервые в истории не было осадков весь месяц
04.08.2026 18:36:00 | Lenta.ru

СК РФ установит обстоятельства сноса памятника советским воинам в Польше
04.08.2026 18:35:28 | ТАСС

В Таиланде 6 августа простятся с убитыми россиянами
04.08.2026 18:34:27 | ТАСС

В России упростят регистрацию пестицидов и агрохимикатов
04.08.2026 18:33:54 | ТАСС

В России в 2030 году отпразднуют 700-летие основания Ипатьевского монастыря
04.08.2026 18:33:17 | ТАСС

Найден доступный способ замедлить развитие деменции
04.08.2026 18:33:00 | Lenta.ru

Депутат Рады Кучеренко посоветовал украинцам запасаться на зиму водой и дровами
04.08.2026 18:32:37 | ТАСС

Раскрыта судьба пропавшего брата Хазанова
04.08.2026 18:32:29 | Lenta.ru

В России ввели единые правила определения границ рыболовных участков
04.08.2026 18:32:12 | ТАСС

Зеленский разрешил бывшим заключённым служить в ТЦК
04.08.2026 18:31:57 | Life.ru

Собянин: порядка 40% пассажиропотока в РФ приходится на Москву
04.08.2026 18:31:19 | ТАСС

В РФ через суд начнут лишать иностранных инвесторов права обратного выкупа акций
04.08.2026 18:31:02 | ТАСС

Зеленский раскрыл ожидания от нового главы СНБО
04.08.2026 18:30:49 | Lenta.ru

Врачи пророчили смерть, а эти 10 личностей не только выжили, но и стали легендами своего времени
04.08.2026 18:30:00 | Life.ru

Путин продлил «гаражную амнистию» до сентября 2031 года
04.08.2026 18:29:30 | Life.ru

Прокуратура потребовала снести гостиницу в Плесском музее-заповеднике
04.08.2026 18:29:15 | Коммерсантъ

ТАСС: СБУ использует украденные Telegram-аккаунты детей для служебных переписок
04.08.2026 18:28:37 | ТАСС

В Финляндии одобрили работу первого в мире подземного хранилища ядерных отходов
04.08.2026 18:28:32 | Life.ru

Россиянам назвали способ выбрать лучшие огурцы и помидоры для засолки
04.08.2026 18:28:11 | Lenta.ru

В России появился ГОСТ по управлению персоналом — поощрять, а не заставлять
04.08.2026 18:27:25 | Life.ru

Создан способный искать болезнетворные мутации "ИИ-биолог"
04.08.2026 18:27:19 | ТАСС

Доказана одна из гипотез Дарвина о плотоядных растениях
04.08.2026 18:26:12 | ТАСС

В Горсаду Твери обустроят 16,5 тыс. кв. м покрытия и уберут воздушные ЛЭП
04.08.2026 18:25:23 | ТАСС

В России высказались о сроках завершения СВО
04.08.2026 18:24:39 | Lenta.ru

Путин наградил Петра Шаболтая орденом "За заслуги перед Отечеством" II степени
04.08.2026 18:23:35 | ТАСС

Путин вывел физлица из-под спецрежима расчетов с кредиторами из недружественных стран
04.08.2026 18:22:13 | ТАСС

В Калуге при атаке украинского БПЛА повреждено остекление в многоквартирном доме
04.08.2026 18:22:01 | ТАСС

В России усилили госконтроль за оборотом зерна
04.08.2026 18:21:36 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro