[Перевод] Я обучил собственную визуально‑языковую модель меньше чем на 1 млрд параметров

15.09.2026 18:25:19 | Хабр

Хабы: Блог компании OTUS, Искусственный интеллект, Машинное обучение, Программирование

Как собрать собственную визуально-языковую модель с нуля, имея ограниченный бюджет и одну арендованную GPU? Автор эксперимента взял небольшую языковую модель, подключил к ней визуальный энкодер и прошёл весь путь обучения VLM – от настройки архитектуры до оценки качества ответов. В статье – разбор решений, ошибки первых запусков и результаты модели на 628 млн параметров, которая научилась описывать изображения примерно за $200.

Смотреть результат

Подробнее

Читайте также

Сбер научил видеонейросети лучше понимать течение времени
15.09.2026 18:25:00 | ferra.ru

Связь времён: Кронос в WASM
15.09.2026 18:20:06 | Хабр

Связь времён: Кронос в WASM
15.09.2026 18:20:06 | Хабр

ИИ для резюме в 2026: как обойти ATS, ChatGPT и HR-алгоритмы
15.09.2026 18:07:17 | Хабр

ИИ делает аналитику доступной каждому, но значит ли это, что аналитиков станет меньше?
15.09.2026 17:43:16 | Хабр

Как я сделал WireGuard-шлюз, который сам переживает блокировку VLESS-сервера
15.09.2026 17:41:39 | Хабр

Минимальная цена, ниже которой маркетплейс не сможет продать товар, и ограничение срока перечисления денег продавцам: Минэкономразвития подготовило второй пакет мер регулирования платформенной экономики
15.09.2026 17:39:37 | vc.ru

А чё, так можно было? Три места в .NET, которые не развидеть
15.09.2026 17:30:36 | Хабр

От совпадения слов к пониманию смысла запроса: как эволюционировали поисковики и AI-чаты
15.09.2026 17:01:22 | Хабр

Не переписывая пайплайны: переезд с include на GitLab CI Components
15.09.2026 17:00:13 | Хабр

На фестивале молодёжи в Екатеринбурге иностранным участникам предоставили доступ к интернету без ограничений, для россиян была предусмотрена отдельная сеть — СМИ
15.09.2026 16:54:43 | vc.ru

До 16 ГБ ОЗУ и Intel Core 5 320: HP представила мини-ПК OmniDesk за $800
15.09.2026 16:49:24 | ferra.ru

Предзаказы на первые ноутбуки Googlebook откроют 21 сентября
15.09.2026 16:43:39 | ferra.ru

Codex написал рабочий код, но не закрыл задачу: как меняется мой процесс разработки
15.09.2026 16:30:10 | Хабр

«А давайте перепишем все на питон!»
15.09.2026 16:30:06 | Хабр

2 года вне найма: пока играл в коммерса, айтишка посыпалась, а теперь трещит и бизнес
15.09.2026 16:01:08 | Хабр

Зачем платить за SaaS, если его код лежит на GitHub: история Postiz
15.09.2026 16:00:08 | Хабр

Коллекция Lumeward. Дверной автоответчик
15.09.2026 15:45:31 | Хабр

nxs-anomaly: open-source инструмент для алертинга и дежурств
15.09.2026 15:36:46 | Хабр

Почему пообъектный скоринг банков не защищает от дефолта контрагента: ретроспективный Due Diligence скам-сделки
15.09.2026 15:28:54 | Хабр

ИИ начал строить себе инфраструктуру
15.09.2026 15:11:44 | Хабр

Заявки есть, а продаж нет: что может скрываться за красивыми цифрами в аналитике
15.09.2026 14:59:04 | Хабр

Почему трафик филиалов тормозит через ЦОД и как исправить это с помощью Identity‑First
15.09.2026 14:51:03 | Хабр

СМИ: у Apple появятся собственные геймпады для смартфонов
15.09.2026 14:49:25 | ferra.ru

Роадмап ML 2026: полный путь до оффера за 36 недель
15.09.2026 14:41:47 | Хабр

CatBoost классификатор с нуля на Python и в Excel
15.09.2026 14:41:36 | Хабр

Каскадное планирование тренировок с LLM: как удержать план в рамках методики
15.09.2026 14:28:19 | Хабр

Первая линия ИТ-поддержки должна решать заявки, а не сортировать
15.09.2026 14:22:36 | Хабр

ИИ‑фабрика: переход к автономной разработке
15.09.2026 14:10:40 | Хабр

Марио про джуна: платформер на 40 КБ без файлов графики и бот, который проверяет каждый уровень перед выкладкой
15.09.2026 14:08:13 | Хабр

Обслуживать не по календарю: что такое RCM-анализ и почему он до сих пор считается сложным
15.09.2026 14:04:37 | Хабр

Адаптация iOS-приложений под iPhone Duo
15.09.2026 13:59:47 | Хабр

Следующими можете быть вы: почему злоумышленники так любят облачные KYC-сервисы
15.09.2026 13:51:24 | Хабр

Совет директоров разработчика WordPress распустили после попытки отстранить гендиректора Мэтта Мулленвега
15.09.2026 13:45:02 | vc.ru

Почему HH не выгодно, чтобы вы быстро нашли работу
15.09.2026 13:39:30 | Хабр

Смотреть все

НОВОСТИ

Набирающий популярность в РФ кроссовер получит полный привод: новая модификация
20.12.2026 06:40:00 | За рулем

Товарооборот Японии и РФ в августе вырос на 19,51%
16.09.2026 02:53:06 | ТАСС

Хегсет и Писториус обсудили концепцию "НАТО 3.0"
16.09.2026 02:50:46 | ТАСС

На Камчатке более 5 тыс. избирателей проголосовали досрочно в море
16.09.2026 02:47:43 | ТАСС

"Совершенно другая": Вэнс рассказал о следующей фазе войны в Иране
16.09.2026 02:45:00 | Российская Газета

Американский дальнобойщик раскрыл правду о своей зарплате
16.09.2026 02:44:50 | Lenta.ru

Гул лифта и вентиляции: В ГД объяснили, куда обращаться жильцу и как добиться устранения шума
16.09.2026 02:43:02 | Life.ru

Эксперт Панкратов рассказал о вариантах развития конфликта между ГУР и СБУ
16.09.2026 02:39:35 | ТАСС

Онколог Каприн заявил об отсутствии тенденции к "омоложению" рака
16.09.2026 02:37:11 | ТАСС

В Минпросвещения рассказали о спортивных модулях в школах
16.09.2026 02:36:13 | ТАСС

Харьковская ВГА: ВСУ не могут деблокировать подразделения в волчанском котле
16.09.2026 02:36:01 | ТАСС

Экс-президента Ливана могут привлечь к суду по делу о взрыве в порту Бейрута
16.09.2026 02:35:53 | Life.ru

Генконсульство РФ передало все невыданные документы в посольство в Берлине
16.09.2026 02:33:38 | ТАСС

Стало известно, где в США может произойти катастрофа по непальскому сценарию
16.09.2026 02:33:00 | Российская Газета

Директор Долиной обратился к ищущим подвох в переносе концерта певицы
16.09.2026 02:31:00 | Lenta.ru

79-летняя пенсионерка смогла отбиться от напавшего на нее медведя
16.09.2026 02:31:00 | Российская Газета

25-летняя учительница совратила 15-летнего школьника у него дома
16.09.2026 02:30:39 | Lenta.ru

Финляндия утвердила 34-й пакет военной помощи Украине на €290 млн
16.09.2026 02:29:31 | Life.ru

Мировым ценам на нефть предрекли взлет
16.09.2026 02:26:01 | Lenta.ru

Палата представителей США одобрила проект резолюции о санкциях против России
16.09.2026 02:25:46 | Life.ru

Лантратова заявила, что в историческую память нужно "вцепиться зубами"
16.09.2026 02:23:27 | ТАСС

Пророссийский хакер заявил о блокировке серверов поставщика товаров для ВСУ
16.09.2026 02:19:40 | Life.ru

ЕС в ответ на требование Зеленского о $27 млрд выдвинул условия финансирования
16.09.2026 02:15:00 | Российская Газета

В Киргизии прекращены поиски пропавшего на Курумды белорусского альпиниста
16.09.2026 02:14:52 | Life.ru

Фурсенко: победители олимпиад должны подтверждать знания хорошим результатом ЕГЭ
16.09.2026 02:14:31 | ТАСС

Экономист Орлова назвала нереалистичным повышение минимальной пенсии до 50 тыс.
16.09.2026 02:14:06 | ТАСС

Россиянам назвали самый продуктивный день недели
16.09.2026 02:11:10 | Lenta.ru

Япония захотела вернуть безвизовые поездки на Курилы
16.09.2026 02:08:57 | Life.ru

Шанхайский прорыв
16.09.2026 02:07:00 | Российская Газета

Ошибка кадровика украдёт годы пенсии: Как северянам, педагогам и медикам спасти льготный стаж
16.09.2026 02:03:00 | Life.ru

Эксперт Киселев допустил скорый запуск кол-центров Зеленского в США
16.09.2026 02:02:25 | ТАСС

Восстановить генератор или проще купить новый? Взвесили все «за» и «против»
16.09.2026 02:00:00 | За рулем

Популярный сорт чая оказался полезен для кишечника
16.09.2026 01:57:34 | Lenta.ru

В США за "адские" санкции против РФ проголосовали 214 человек, а 211 - против
16.09.2026 01:57:00 | Российская Газета

C-SPAN: 214 конгрессменов в Палате представителей выступили за санкции против РФ
16.09.2026 01:57:00 | Российская Газета

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro