MELT-1: трансформер 7B сдыхает за 11 часов, а наш агент живёт 95

17.05.2026 14:21:58 | Хабр

Хабы: Анализ и проектирование систем, Искусственный интеллект, DIY или Сделай сам, IT-инфраструктура

TL;DR. Мы выкатили открытый бенчмарк MELT-1 — он меряет не сколько модель знает в идеальных условиях (MMLU & co), а сколько она проживёт под дрифтом распределения и сколько стоит держать её живой. Три оси: $/1M успешных решений, часы до деградации без ретрейна, p99-латентность сенсор→актуатор под 40 °C. 30 суток непрерывного инференса, 5 сидов, два температурных профиля, sensitivity-анализ. На closed-loop manipulation наш агент (Metabolic AI, non-transformer) против Llama-class 7B INT8 показал 9.4× по стоимости, 8.5× по выживанию под дрифтом, ~1600× композитно. Архитектура закрыта — патент на стадии экспертизы. Бенч открытый: харнесс, сцены, оракул, sensitivity-скрипты, опубликованный VAE-энкодер дрифта. Прогоните своих агентов и положите рядом. PDF с полной методологией и threats to validity — в конце статьи.

Посмотреть

Подробнее

Читайте также

А что не так с вашими миграциями? Liquibase, rollback и первые тревожные признаки
17.05.2026 14:18:10 | Хабр

Как Vision-Language Models учатся работать с 3D-миром
17.05.2026 14:05:05 | Хабр

Ил-114-300 завершил арктические испытания в условиях Крайнего Севера
17.05.2026 13:55:59 | ferra.ru

Подружитесь со своим ассистентом
17.05.2026 13:53:39 | Хабр

Китайские платформы внедрят ИИ-агентов для изменения онлайн-шопинга
17.05.2026 13:36:50 | ferra.ru

SectorOS: операционная система в пределах 512 байт
17.05.2026 13:32:25 | Хабр

Рабочие способы вывести криптовалюту в рубли в 2026 г
17.05.2026 13:07:37 | Хабр

Гэри «Соло» МакКиннон: взломать Пентагон в поисках НЛО, бесплатной энергии, и чтоб никто не ушёл обиженным
17.05.2026 13:01:55 | Хабр

Работодатели больше не верят резюме
17.05.2026 13:00:00 | it-world

Новичок дороже старожила
17.05.2026 12:55:59 | Хабр

ДОМ.РФ и Москва договорились о сотрудничестве в цифровизации строительства
17.05.2026 12:55:58 | ferra.ru

Пиратство, копирайт и DMCA: как Napster, The Pirate Bay и YouTube изменили закон. Часть I
17.05.2026 12:13:30 | Хабр

Мобильная разработка за неделю #630 (11 — 17 мая)
17.05.2026 12:12:37 | Хабр

Почему мы живем в мире правшей?
17.05.2026 11:57:10 | Хабр

Российские ученые обнаружили региональные генетические мутации у народов Кавказа
17.05.2026 11:55:56 | ferra.ru

Как управлять эволюционным поиском? На примере конечных автоматов
17.05.2026 11:52:38 | Хабр

В России создали экспресс-тест на вредный пластик в товарах
17.05.2026 10:55:55 | ferra.ru

Пульсар как антивещественный реактор. Недокументированная фича нейтронных звёзд
17.05.2026 10:17:01 | Хабр

Путь к ПМЖ после немецкого диплома: §20, Blue Card и прочие немецкие радости
17.05.2026 10:01:42 | Хабр

МакКладун или почему балансеруны не нужны
17.05.2026 09:59:24 | Хабр

В России нашли способ точнее оценивать прочность титановых деталей для авиации
17.05.2026 09:34:02 | ferra.ru

YouTube расширил доступ к инструменту поиска дипфейков
17.05.2026 09:24:36 | ferra.ru

Строительство Саркофага. Часть 1. Бетон, гранит и 1000 Р/ч: рождение «Укрытия»
17.05.2026 09:05:38 | Хабр

[Перевод] Эпоха иллюзорной продуктивности
17.05.2026 09:01:37 | Хабр

Агенты, которые играют в игры: как MMORPG обучают ИИ кооперации, предательству и дипломатии
17.05.2026 08:38:22 | Хабр

Сети База для начинающих
17.05.2026 08:19:28 | Хабр

Fake Door Test: проверить продукт, не создавая его
17.05.2026 08:09:36 | Хабр

Ask.com закрылся. Что это был за сервис? Вспоминаем 90-е
17.05.2026 08:00:26 | Хабр

Из актрисы в бизнес-аналитика: как я выбирала новую профессию, училась и искала работу
17.05.2026 07:03:16 | Хабр

Как перестать взрывать мозг оппонентам. Кошелек Миллера в межкомандных переговорах
17.05.2026 06:42:02 | Хабр

Простая волновая интерпретация гравитации и эффекта Казимира
17.05.2026 06:27:47 | Хабр

Memento mori
17.05.2026 06:24:06 | Хабр

Технологическая сингулярность и судьба человечества
17.05.2026 06:22:55 | Хабр

Аа-а-а-а. Всем хана, мы будем безработными!...???
17.05.2026 04:34:32 | Хабр

В Иннополисе создали ПО, ускоряющее программирование сварочных роботов в 3–5 раз
16.05.2026 23:45:00 | ferra.ru

Смотреть все

НОВОСТИ

Китай впервые осуществил контролируемое возвращение первой ступени ракеты-носителя на морскую платформу
11.07.2026 13:45:00 | Российская Газета

В Варшаве появится стена памяти жертв Волынской резни с Вечным огнём
11.07.2026 13:42:28 | Life.ru

Командир Буржуй: ВСУ маскируются под мирных жителей в Красном Лимане
11.07.2026 13:41:35 | ТАСС

Сколько ни зарабатывай, всё мало: Психолог раскрыла, как распознать синдром «недо»
11.07.2026 13:40:05 | Life.ru

Раскрыто отношение ушедшей из жизни британской певицы к людям в России
11.07.2026 13:39:24 | Lenta.ru

Водителей призвали не спешить с мойкой машины после поездки по летнему зною
11.07.2026 13:36:19 | Life.ru

В Харькове и области с начала СВО разрушены 74 АЗС
11.07.2026 13:36:09 | ТАСС

Ароматы, но не ванили: как бороться с невыносимой вонью из квартиры соседа
11.07.2026 13:35:20 | Life.ru

В Тверской области при пожаре в частном доме погиб ребёнок
11.07.2026 13:34:17 | Life.ru

«Кидают на убой»: Командование ВСУ использует солдат в Константиновке ради красивых отчётов
11.07.2026 13:32:10 | Life.ru

«Не стесняйся, любимый»: 10-летний россиянин едва не стал жертвой педофила в Турции
11.07.2026 13:31:59 | Life.ru

Китай эвакуировал более миллиона человек из-за супертайфуна «Бави»
11.07.2026 13:31:50 | Lenta.ru

Пермская прокуратура открыла горячую линию для жителей подтопленного села Кын
11.07.2026 13:29:32 | Life.ru

В Минске проходит фестиваль уличных видов спорта
11.07.2026 13:27:00 | Российская Газета

Центр «Э» задержал жителя Татарстана за видео последствий атаки БПЛА
11.07.2026 13:26:35 | Коммерсантъ

Собянин осмотрел новый корпус Единого диспетчерского центра московского транспорта
11.07.2026 13:23:05 | ТАСС

МО РФ: взятие под контроль Бачевска способствует расширению полосы безопасности
11.07.2026 13:22:58 | ТАСС

Не понос, так депрессуха: Врачи доказали, что запор и диарея портят настроение
11.07.2026 13:22:55 | Life.ru

ТАСС: Боевики "Азова" причастны к убийству хотевшего сдаться в плен пограничника
11.07.2026 13:21:00 | Российская Газета

Анонсировано важное послание верховного лидера Ирана
11.07.2026 13:20:38 | Lenta.ru

Fars: Иран не вернется к переговорам с США, пока они не изменят свою позицию
11.07.2026 13:20:08 | ТАСС

Крику много, денег мало: В Госдуме оценили итоги саммита НАТО
11.07.2026 13:19:53 | Life.ru

Депутат Рады Гончаренко: на Украине объявляют в розыск врачей-интернов
11.07.2026 13:18:53 | ТАСС

Стало известно о наркотической зависимости осужденной за распространение порно Шурыгиной
11.07.2026 13:16:51 | Lenta.ru

При атаке БПЛА на автомобиль под Белгородом пострадали два человека
11.07.2026 13:16:15 | Life.ru

В Крыму количество АЗС со свободной продажей топлива выросло до 99
11.07.2026 13:15:47 | Life.ru

В Свердловской области финансирование соцгазификации выросло на 6,6 млрд рублей
11.07.2026 13:14:44 | ТАСС

Тыловика ВСУ осудили за хищения продуктов
11.07.2026 13:14:33 | Lenta.ru

Нигматуллин отметил высокий уровень игры вратарей на чемпионате мира
11.07.2026 13:14:29 | ТАСС

«Секрет спокойствия — в дыхании»: Индийский гуру рассказал, как перестать тревожиться
11.07.2026 13:14:12 | Life.ru

Онищенко: в России будет расти число случаев "болезней-всадников"
11.07.2026 13:14:06 | ТАСС

Тыловика ВСУ осудили за хищение продуктов
11.07.2026 13:14:00 | Lenta.ru

ВС России поразили используемые ВСУ объекты ТЭК
11.07.2026 13:13:55 | Lenta.ru

В ДНР при сбросе взрывчатки с дрона ВСУ пострадал мужчина
11.07.2026 13:13:41 | ТАСС

Житель Первомайска ранен из-за атаки ВСУ по парковке
11.07.2026 13:08:06 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro