Галлюцинации VLM в zero-shot детекции: ложные тревоги о дыме и решение на уровне промпта

11.09.2026 08:15:46 | Хабр

Хабы: Искусственный интеллект, Машинное обучение, Обработка изображений

Как я попробовала решить задачу детекции огня и дыма без обучения, zero-shot детекцией на VLM. О том, как изначально всё работало на видео с настоящим дымом, а на заведомо чистых улицах модель нашла «дым» на 70 % моих данных: рисовала боксы на машинах, знаках и светофорах, иногда с confidence 0% и текстовым пояснением, что дыма нет. В статье описала, почему одношаговый bbox-формат провоцирует ложные детекции, какие стандартные приёмы промпт-инжиниринга не помогли и какое изменение промпта снизило долю ложных тревог с 70 % кадров до нуля при recall выше 80%.

Подробнее

Читайте также

Особенности сбора кодового покрытия в ОС “Нейтрино”
11.09.2026 08:00:45 | Хабр

Генетика личности: корреляция между генетическими вариантами и личностными чертами
11.09.2026 08:00:26 | Хабр

Когда decode(encode(x)) == x недостаточно
11.09.2026 07:59:44 | Хабр

Что делает разработчика ценным, когда код всё лучше пишут AI‑агенты
11.09.2026 07:50:44 | Хабр

Как разрабатывать приложения для iPhone на iPad
11.09.2026 07:33:44 | Хабр

Цифровое государство, или Гостех 0.0
11.09.2026 07:27:12 | Хабр

От маминой фермы до транснациональной корпорации: история Kraft Heinz
11.09.2026 07:22:34 | Хабр

NapiSci — учебная плата, на которой собран дипломный проект станции мониторинга микроклимата для глубокого сна
11.09.2026 07:22:02 | Хабр

Ozon сообщил об атаке беспилотников на склад в Саратове
11.09.2026 07:16:41 | vc.ru

Я радиоволна, радиоволна… Или о «блинкерах» для сотовых телефонов — продолжателях традиций детекторных приёмников
11.09.2026 07:04:39 | Хабр

У вас настроены SPF и DKIM. Письмо от вашего имени всё равно дойдёт
11.09.2026 07:00:37 | Хабр

Как написать свой распределенный оркестратор виртуалок и не тронуться умом? Часть первая: архитектурная
11.09.2026 07:00:37 | Хабр

Шарнир складного iPhone Duo сделали с помощью ИИ и 3D-печати
11.09.2026 06:51:49 | ferra.ru

Локальный файрвол действий для кодинг‑агентов: связать то, что агент прочитал, с тем, что он собирается выполнить
11.09.2026 06:50:35 | Хабр

ИИ уже умеет собирать микросервисы по одному промпту, но, как разработчик, я всё ещё нужен
11.09.2026 06:26:03 | Хабр

Искусственный интеллект и ФСТЭК России: действующие и проектируемые документы по состоянию на 01.09.2026
11.09.2026 06:25:07 | Хабр

День, когда первый ИИ умрёт
11.09.2026 06:11:32 | Хабр

Открываем претрейн Alice AI Search: как устроена модель быстрых ответов Алисы на Поиске
11.09.2026 06:05:13 | Хабр

7 дней новостей ИИ (05.09.26…11.09.26): пока вы спали, вышло ещё три модели
11.09.2026 05:36:46 | Хабр

Ищем lateral movement нейросетью, обученной на синтетических данных
11.09.2026 05:34:18 | Хабр

Как управлять Samsung устройствами без Google и почему на других устройствах так нельзя
11.09.2026 05:00:27 | Хабр

RAG, поиск и LongContext: почему сложные пайплайны не всегда нужны
11.09.2026 02:05:58 | Хабр

В России назвали Луну достоянием всего человечества
10.09.2026 23:42:50 | ferra.ru

На Ставрополье запустили серийное производство багги из отечественных деталей
10.09.2026 23:37:48 | ferra.ru

Ростех создаст систему «ЛИСА» для помощи незрячим людям
10.09.2026 23:36:39 | ferra.ru

Российские ученые назвали самый урожайный вид микрозелени
10.09.2026 22:39:58 | ferra.ru

Мессенджер WeChat научились взламывать через звонок. Даже трубку снимать не нужно
10.09.2026 21:51:49 | ferra.ru

Сенатор Шейкин предложил отдавать приоритет российскому ИИ при госзакупках
10.09.2026 21:43:01 | ferra.ru

The Boring Company Илона Маска подтвердила привлечение инвестиций при оценке $23 млрд, раунд возглавили ОАЭ — компания построит тоннель в Дубае
10.09.2026 21:14:00 | vc.ru

Флагманский смартфон iQOO 16 и планшет iQOO Pad Ultra представят в этом месяце
10.09.2026 21:01:23 | ferra.ru

Прохождение машины Reactor на Hack The Box
10.09.2026 20:56:19 | Хабр

Прохождение машины Reactor на Hack The Box
10.09.2026 20:56:19 | Хабр

SPAC — биржевая фирма‑обертка. Выводит на биржу того кто не может. Почему в App Store и Google Play такого почти нет?
10.09.2026 20:55:54 | Хабр

SPAC — биржевая фирма-обертка. Выводит на биржу того кто не может. Почему в App Store и Google Play такого почти нет?
10.09.2026 20:55:54 | Хабр

Российские ученые нашли применение стволовым клеткам из жировых комков Биша
10.09.2026 20:49:18 | ferra.ru

Смотреть все

НОВОСТИ

Набирающий популярность в РФ кроссовер получит полный привод: новая модификация
20.12.2026 06:40:00 | За рулем

Врач Якимович развеяла миф об эффективности аппликатора Кузнецова
23.10.2026 00:46:01 | ТАСС

Российско-китайская эскадра потопила британскую подлодку у берегов Антарктиды
23.10.2026 00:45:39 | Lenta.ru

УНИКС разгромил МБА-МАИ в матче Единой лиги ВТБ
23.10.2026 00:44:47 | Lenta.ru

Лихачев: судьба АЭС "Пакш-2" неизвестна из-за отсутствия сигналов от Венгрии
23.10.2026 00:43:49 | ТАСС

CNA: депутаты парламента Албании подрались из-за разногласий по протестам
23.10.2026 00:41:08 | ТАСС

Трамп будет привлекать к ответственности людей из своего окружения
23.10.2026 00:38:11 | ТАСС

Кушнер опроверг утверждения о причастности к тайным финансовым операциям
23.10.2026 00:37:48 | ТАСС

Косачев прокомментировал отношения с США фразой про "табачок"
23.10.2026 00:36:22 | ТАСС

Один ликвидирован, второй задержан: Кадыров раскрыл детали расследования диверсий в Чечне
23.10.2026 00:35:32 | Life.ru

Эмилии Кларк исполнилось 40: как актриса стала Матерью драконов и лицом «Игры престолов»
23.10.2026 00:35:00 | Life.ru

В Подмосковье детский телефон доверия принял более 52 тыс. звонков с начала года
23.10.2026 00:34:48 | ТАСС

Мошенники в рамках новой схемы начали отправлять россиян в Росфинмониторинг
23.10.2026 00:32:14 | ТАСС

Генсек ОДКБ заявил, что Армения сама де-факто уже вышла из ОДКБ
23.10.2026 00:30:45 | ТАСС

Порнозвезда шокировала грузчиков во время переезда
23.10.2026 00:30:33 | Lenta.ru

Покупателей больших телевизоров предупредили об опасности
23.10.2026 00:30:18 | Lenta.ru

В Поморье в ДТП с участием шести автомобилей пострадали два человека
23.10.2026 00:29:01 | ТАСС

СКА обыграл «Сибирь» и прервал серию поражений
23.10.2026 00:28:40 | Lenta.ru

Трамп задействовал закон времен войны в Корее для борьбы с ценами на топливо
23.10.2026 00:28:11 | ТАСС

Президент Кипра потребовал от главы ЕК продолжить обсуждение взаимной обороны ЕС
23.10.2026 00:27:53 | ТАСС

При мощном землетрясении в Тибете погибли не менее 16 человек
23.10.2026 00:25:01 | Life.ru

Названо место и время прощания с актером фильма «Мы из будущего» Терентьевым
23.10.2026 00:24:59 | Lenta.ru

Трамп обвинил Джеймса в неуважении к гимну США
23.10.2026 00:22:20 | Lenta.ru

Грушко назвал условие для развития отношений России и США
23.10.2026 00:21:17 | ТАСС

Сомнолог назвала причину лунатизма
23.10.2026 00:20:35 | Lenta.ru

В Китае произошло землетрясение магнитудой 7, погибли 16 человек
23.10.2026 00:20:00 | Российская Газета

Конгрессвумен Луна призвала демократов поддержать урегулирование на Украине
23.10.2026 00:19:17 | ТАСС

Антонелли в США может стать самым молодым чемпионом "Формулы-1"
23.10.2026 00:18:46 | ТАСС

Первый гол в Лиге Европы: Захарян отличился в разгромном матче «Реал Сосьедада»
23.10.2026 00:17:14 | Life.ru

Россиянам перечислили связанные с мошенниками странности в работе телефона
23.10.2026 00:16:50 | Lenta.ru

ANSA: почти все АЗС в районе Неаполя остались без топлива из-за забастовки
23.10.2026 00:16:41 | ТАСС

«Иди и смотри»: Как изображение на майке Егора Крида оскорбило общество
23.10.2026 00:15:00 | Life.ru

Российские гандболистки не смогли выйти в финал юниорского чемпионата мира
23.10.2026 00:14:22 | ТАСС

Посольство РФ считает, что Дания готовится задерживать корабли с грузами России
23.10.2026 00:13:19 | ТАСС

Путин сравнил принудительную мобилизацию на Украине с отловом бездомных собак
23.10.2026 00:12:46 | Life.ru

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro