Операция выполнена!

info@vsetut.pro

Стать автором

Вернуться

Как мы с Claude Code учились оценивать качество RAG системы

18.06.2026 14:23:51 | Хабр

Хабы: Искусственный интеллект, Natural Language Processing, Машинное обучение

Уверен, на Хабре найдётся немало статей, посвященных оценке качества RAG систем. Тема по-прежнему остаётся актуальной, потому что даже готовые библиотеки вроде RAGAS не очень-то работают из коробки и требуют навыков программирования и некоторой квалификации. При этом сам процесс оценки - повторение достаточно простых операций и мне всегда хотелось переложить его на AI-ассистента.

Повод попробовать появился неожиданно: свободное время и курс по Claude Code на Stepik. Для финала как раз нужен был проект, посвященный автоматизации реальной рутинной задачи, желательно без кода (курс про вайб-воркинг, для непрограммистов). Конечно, я сразу вспомнил про задачу оценки качества. Дальше - честная история со всеми проблемами. Забегая вперёд, скажу, что совсем без программирования не вышло. Но, может, это профессиональная деформация.

Читать далее

Подробнее

Читайте также

Дедупликация пользователей в базе данных: сохраняем связанные записи
18.06.2026 14:20:40 | Хабр

Границы применимости LLM в мобильном UI-дизайне
18.06.2026 14:08:05 | Хабр

Anthropic будит бога по ночам. Или почему разработчиков заставляют выбирать между здоровьем и рабочим кодом
18.06.2026 13:53:08 | Хабр

AI-ассистент пишет код: 8 антипаттернов, из-за которых он падает в проде
18.06.2026 13:41:12 | Хабр

Как я нашел новую панграмму (разнобуквицу)
18.06.2026 13:40:11 | Хабр

Суд приговорил блогера Александру Митрошину к трём годам тюрьмы условно
18.06.2026 13:39:19 | vc.ru

Google начала тестировать новый вид «капчи» — пользователь должен предоставить доступ к камере и сделать указанный жест рукой
18.06.2026 13:30:38 | vc.ru

Ученые ДГУ создали мембраны для очистки воды магнитным полем
18.06.2026 13:21:58 | ferra.ru

[Перевод] Почему промпты для VLM работают наоборот: как это исправить
18.06.2026 13:20:19 | Хабр

Какие страхи мешают разработчикам перейти на Cloud IDE и как мы их закрывали архитектурно
18.06.2026 13:07:56 | Хабр

Автотесты: опыт построения системы качества для Kubernetes-платформы
18.06.2026 13:07:04 | Хабр

Я перестал помнить что вчера делал. Поставил автосводку дня из 4 источников. Конфиги
18.06.2026 13:06:49 | Хабр

Российский бренд Tenet Plus показал первую модель — кроссовер L6, идентичный китайскому Lepas L6 от Chery
18.06.2026 13:05:38 | vc.ru

Про то, как из 0°C получить мороз в десятки градусов и не только
18.06.2026 13:02:07 | Хабр

В «ЛЭТИ» создали приложение для расчета массы протеза
18.06.2026 12:55:14 | ferra.ru

Как не получить бан в Claude: возможные причины и решения
18.06.2026 12:49:15 | Хабр

SI/PI в разработке электронных устройств: анализ, который сэкономит вам время, деньги и нервы
18.06.2026 12:45:38 | Хабр

Sharp выпустит умные часы, которые сами определят, сколько калорий вы съели
18.06.2026 12:43:44 | ferra.ru

Sitemap-first аудит большого сайта: как найти пустые посадочные без полного краулинга
18.06.2026 12:42:44 | Хабр

[Перевод] Модели угроз пакетных менеджеров
18.06.2026 12:38:48 | Хабр

Разработчик ИИ для генерации картинок Midjourney показал прототип аппарата для ультразвукового сканирования тела, который сможет создать 3D-снимок «меньше чем за минуту»
18.06.2026 12:32:40 | vc.ru

Remoded: разбираем демо-эффекты (часть 2)
18.06.2026 12:26:36 | Хабр

Как не провалить AV-интеграцию в зале-трансформере: 6 шагов от проекта до метрик
18.06.2026 12:20:03 | Хабр

Opus оркеструет, DeepSeek V4 пишет код: как собрать связку внутри Claude Code и сэкономить деньги
18.06.2026 12:15:12 | Хабр

Как научить языковую модель читать транзакции: превращаем историю платежей в базу знаний
18.06.2026 12:08:03 | Хабр

81 000 интервью с Claude: чего на самом деле хотят люди от ИИ (и что их пугает)
18.06.2026 12:07:50 | Хабр

Маркировка обрушила объем обзвона, но не убила голосовой канал
18.06.2026 12:04:10 | it-world

Налоговый мониторинг в России. Мнение специалиста
18.06.2026 11:57:56 | Хабр

Топ сомнительных советов по Директу
18.06.2026 11:55:48 | Хабр

Неочевидные проблемы в Text‑to‑Speech, о которых редко говорят
18.06.2026 11:51:25 | Хабр

Мы рисовали мультики руками, а потом пришла нейросеть
18.06.2026 11:49:24 | Хабр

Golden Armada: трассировки как основа наблюдаемой AI-native системы
18.06.2026 11:44:46 | Хабр

ИТ-ипотека оживает после рекордного падения
18.06.2026 11:44:20 | it-world

Нейросети как интеллектуальная прослойка между людьми
18.06.2026 11:36:55 | Хабр

Как я завёл нормальный голос в детское приложение, не разорившись и не заставив никого лезть в настройки
18.06.2026 11:30:30 | Хабр

Смотреть все

НОВОСТИ

Стало известно, на каких машинах сконцентрируется марка Volga
24.06.2026 17:40:00 | За рулем

В Русских домах по всему миру прошли мероприятия в День памяти и скорби
22.06.2026 20:13:11 | Life.ru

Турист подвергся нападению на глазах у жены и не выжил на курорте Европы
22.06.2026 20:13:09 | Lenta.ru

В Нью-Дели прошли памятные мероприятия по случаю Дня памяти и скорби
22.06.2026 20:12:58 | ТАСС

Трамп считает, что Иран согласится на масштабные инспекции в ядерной сфере
22.06.2026 20:12:39 | ТАСС

ВСУ за неделю повредили три автобуса одного перевозчика в Горловке
22.06.2026 20:12:33 | ТАСС

От удара по Воронежу пострадали проигнорировавшие предупреждение об опасности
22.06.2026 20:11:07 | ТАСС

Смерть наступает за сутки: В Конго расследуют вспышку неизвестной болезни
22.06.2026 20:10:52 | Life.ru

«Чудо в болоте»: Под Псковом нашли армейский сейф со знаменем и документами времён ВОВ
22.06.2026 20:09:31 | Life.ru

NBC: умер музыкальный продюсер Клайв Дэвис
22.06.2026 20:08:05 | ТАСС

Загадку дребезжащих смартфонов Samsung объяснили
22.06.2026 20:07:53 | Lenta.ru

Российские юниоры взяли золото на чемпионате Европы по прыжкам в воду
22.06.2026 20:07:51 | Life.ru

В Евросоюзе высказались о прогрессе в вопросе переговоров с Россией
22.06.2026 20:06:37 | Lenta.ru

Стало известно об угрозе обрушения фронта для ВСУ на нескольких участках
22.06.2026 20:06:04 | Lenta.ru

У Брестской крепости высадили деревья в День памяти и скорби
22.06.2026 20:05:30 | ТАСС

В Саратовской области вводят временные лимиты на бензин из-за ажиотажа
22.06.2026 20:05:24 | Life.ru

МИД РФ: представители Москвы и Тегерана провели консультации по меморандуму Ирана и США
22.06.2026 20:03:05 | ТАСС

Иран отправил в Оман «тяжёлую артиллерию» для передела Ормуза
22.06.2026 20:03:01 | Life.ru

В Екатеринбурге началось обучение 500 волонтеров к фестивалю молодежи
22.06.2026 20:02:54 | ТАСС

В Подмосковье задержали двоих россиян за подготовку по заданию Киева подрыва поезда с ГСМ
22.06.2026 20:01:20 | ТАСС

Вагенкнехт считает удары немецким оружием вглубь территории РФ крайне опасными
22.06.2026 20:01:19 | ТАСС

Два человека погибли при установке кондиционера в Оренбургской области
22.06.2026 20:00:53 | Life.ru

Большая часть работников предприятия в Воронеже успела спуститься в убежище
22.06.2026 20:00:06 | Life.ru

Вышел первый трейлер научно-фантастического фильма Тайки Вайтити "Клара и Солнце" с Дженной Ортегой и Эми Адамс
22.06.2026 20:00:04 | PlayGround.ru

Уютный симулятор отеля для животных Pawsome Resort вышел в ранний доступ в Steam
22.06.2026 19:59:48 | PlayGround.ru

Двое пострадали при ударе дрона по автомобилю в Белгородской области
22.06.2026 19:59:08 | РБК

Эрдоган: Турция будет содействовать примирению Ирана и США
22.06.2026 19:58:02 | ТАСС

ФТС переподчинит три центра электронного декларирования с 15 июля
22.06.2026 19:57:48 | ТАСС

Стало известно число пострадавших из-за атаки ВСУ на Горловку
22.06.2026 19:57:00 | Lenta.ru

В числе пострадавших от удара БПЛА ВСУ по автобусу в Горловке оказался подросток
22.06.2026 19:56:57 | ТАСС

Лантратова сообщила об ответе ООН на обращение по Старобельску
22.06.2026 19:56:30 | РБК

Bohemia Interactive выпустила демоверсию Arma: Cold War Assault Remastered и открыла исходный код движка
22.06.2026 19:56:14 | PlayGround.ru

Этот популярный кроссовер теперь будут делать в России: подробности
22.06.2026 19:55:18 | За рулем

В Воронеже повреждены 10 многоэтажек и шесть частных домов после атаки ВСУ
22.06.2026 19:55:08 | Life.ru

Движение транспорта по Крымскому мосту перекрыли в пятый раз
22.06.2026 19:53:20 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro

Copyright © 2026 - vsetut.pro