Кастомный пайплайн BERTopic: как кластеризовать тексты и получить интерпретируемые темы с помощью LLM

16.05.2026 17:16:24 | Хабр

Хабы: Блог компании Ростелеком, Машинное обучение, Искусственный интеллект, Natural Language Processing

Привет, Хабр! Меня зовут Антон и я занимаюсь задачами NLP в компании Ростелеком Информационные технологии.

Если вам приходилось разбирать большие массивы текстов: отзывов, обращений в поддержку или комментариев, то вы знаете, насколько это трудоемкий процесс.

В статье я покажу, как автоматизировать этот процесс с помощью пайплайна BERTopic: от эмбеддингов и кластеризации до интерпретации тем. Особое внимание уделим тому, как встроить локальную LLM в пайплайн и получить человекочитаемые названия тем.

Подробнее

Читайте также

В Бразилии случайно рассекретили новый дорогой геймпад Xbox
16.05.2026 17:06:20 | ferra.ru

Российские ученые ускорили ИИ для анализа научных текстов на русском
16.05.2026 16:59:33 | ferra.ru

ИИ для генерации видео из фото: Выбираем лучшую нейросеть 2026 года для создания классных роликов
16.05.2026 16:52:28 | Хабр

На «Госуслугах» запустят карту укусов клещей
16.05.2026 16:22:13 | ferra.ru

Эксперт: биоэкопоселения вдоль Севморпути помогут развить науку и сберечь природу
16.05.2026 16:15:00 | ferra.ru

Анатомия production AI агента: разбор двух открытых промптов Anthropic
16.05.2026 15:35:55 | Хабр

Бесплатное место в облаке для Google-аккаунтов будет всего 5 ГБ. С нюансом
16.05.2026 15:06:21 | ferra.ru

ИИ съест экономику изнутри. А потом запустит ядерный апокалипсис
16.05.2026 14:55:34 | Хабр

Нашёл ли Докинз сознание в Claude? А если нет, то что он нашёл?
16.05.2026 14:30:22 | Хабр

OSINT для ленивых. Часть 10: Что у нас с фирмами в США?
16.05.2026 14:12:10 | Хабр

Как работают lambda-функции в Python: замыкания, позднее связывание и антипаттерны
16.05.2026 13:37:20 | Хабр

Атомная программа КНДР
16.05.2026 13:30:51 | Хабр

Российские ученые получили соединения против вируса оспы
16.05.2026 13:11:55 | ferra.ru

Показаны первые наушники-клипсы Xiaomi
16.05.2026 13:06:22 | ferra.ru

Робот-поводырь за 1600 $: как ИИ пришел туда, где раньше были только собаки и благотворительность
16.05.2026 13:05:48 | Хабр

Резиновый кирпич: история планшета Kalidor, опередившего эпоху
16.05.2026 13:01:45 | Хабр

Отечественный суперкартридж для старушки Mega Drive и его киллер-фичи
16.05.2026 12:46:07 | Хабр

Дубайская Emirates начала внедрять спутниковый интернет Starlink в самолёты Airbus A380 и Boeing 777
16.05.2026 12:43:52 | vc.ru

SELinux — Быстрый онбординг: типы, атрибуты, домены, политики и утилиты на практике
16.05.2026 12:37:56 | Хабр

Обзор наушников Commo Immersive и Commo One 2.0
16.05.2026 12:37:40 | Хабр

Генеральное исследование рынка ИИ-агентов и Zero-Employee Company
16.05.2026 12:13:43 | Хабр

AI-native компания: почему пора перестать делать продукты
16.05.2026 12:00:14 | Хабр

Multi-region quorum: «все регионы согласны» против «N из M»
16.05.2026 11:59:38 | Хабр

Свой P2P-файлообменник с блэкджеком и NAT punching: как пет-проект Z-Folder стал заменой облакам
16.05.2026 11:39:33 | Хабр

Хромосомы и их проблемы
16.05.2026 11:30:32 | Хабр

ИИ-автоматизация на пике спроса. Но кто будет управлять тем, что вы внедрили?
16.05.2026 11:24:09 | Хабр

В сеть слили подробности камер флагмана iQOO 16
16.05.2026 11:06:25 | ferra.ru

ФАС раскрыла картель в ИТ-закупках на 236 млн рублей с участием структуры «Софтлайн»
16.05.2026 11:05:03 | vc.ru

Сбер организовал первую лизинговую сделку на комплекс GigaChat Enterprise
16.05.2026 10:48:22 | ferra.ru

Пул объектов: паттерн эффективного управления памятью
16.05.2026 10:08:38 | Хабр

Нейросеть для бренда: ТОП-10 ИИ для логотипа, фирменного стиля и визуальной концепции
16.05.2026 09:56:00 | Хабр

Искусственный интеллект вместо менеджера, или Как ИИ-чатбот помогает мне продавать обучение в режиме 24/7
16.05.2026 09:41:14 | Хабр

Кешбэк-апокалипсис: у меня семь карт, смартфон с ИИ и я всё равно плачу не той картой
16.05.2026 09:27:17 | Хабр

Samsung будет использовать процессор Dimensity 9500. Вероятно, в планшетах
16.05.2026 09:06:32 | ferra.ru

Калькулятор VRAM для локальных LLM: Какие модели ИИ запустятся у вас на компьютере?
16.05.2026 09:04:21 | Хабр

Смотреть все

НОВОСТИ

Лавров сообщил о долге Армении по взносам в ОДКБ
10.06.2026 14:28:37 | Life.ru

«Бред космического масштаба»: Захарова обрушилась на Зеленского из-за запрета русских книг
10.06.2026 14:28:26 | Life.ru

Трамп пригрозил Ирану расплатой
10.06.2026 14:26:50 | Lenta.ru

Вор в законе наделил криминальным статусом россиянина и подвел его под статью
10.06.2026 14:26:46 | Lenta.ru

ФЛССР обсудила сотрудничество с министром спорта Сербии в Белграде
10.06.2026 14:26:24 | ТАСС

ВС РФ уничтожили ударами дронов два танка ВСУ в Краматорске
10.06.2026 14:26:19 | ТАСС

В Госдуме прокомментировали идею о депортации студентов за неуспеваемость
10.06.2026 14:26:18 | Lenta.ru

При пожаре в жилом доме в московском Солнцеве пострадали три человека
10.06.2026 14:26:10 | Life.ru

Во Владимире загорелись автобус и бензовоз
10.06.2026 14:24:46 | ТАСС

Свобода вместо 19 лет колонии: Юрист объяснил, как Миримской удалось добиться УДО
10.06.2026 14:24:14 | Life.ru

В "Художественном" представят второй эпизод программы про образ Москвы в кино
10.06.2026 14:24:10 | ТАСС

В Москве хотели подорвать автомобиль сотрудника научно-производственного предприятия. Задержаны двое подростков
10.06.2026 14:24:08 | Lenta.ru

Посол РФ поблагодарил соотечественников во Франции за поддержку России
10.06.2026 14:23:53 | ТАСС

На горячую линию главврача в Подмосковье поступило более 145 тыс. звонков
10.06.2026 14:23:18 | ТАСС

Блок "Сильная Армения" еще не решил, войдет ли в состав нового парламента
10.06.2026 14:21:06 | ТАСС

Президент Финляндии призвал к диалогу с Путиным
10.06.2026 14:21:02 | Lenta.ru

Раскрыт неочевидный фактор повышенного риска варикоза
10.06.2026 14:20:29 | Lenta.ru

Лолита нашла замену сексу
10.06.2026 14:20:00 | Lenta.ru

Дедушка отомстил за сбитого кота, устроив фаер-шоу с машиной лихача
10.06.2026 14:20:00 | Life.ru

ГД увеличивает состав наблюдательных советов автономных учреждений РФ
10.06.2026 14:19:34 | ТАСС

В аэропорту Калининграда задержали 23 рейса
10.06.2026 14:19:29 | ТАСС

Считающий себя ребёнком мужчина пытался проникнуть в детский сад в Подмосковье
10.06.2026 14:18:23 | Life.ru

Премьер Ирака получил приглашение Путина на Форум экспортеров газа
10.06.2026 14:18:14 | ТАСС

Лавров высказался о переговорах с Евросоюзом по Украине
10.06.2026 14:18:00 | Lenta.ru

Захарова: В Евросоюзе не ждут Армению
10.06.2026 14:17:56 | Life.ru

«Послушать — мы послушаем»: Британия, Франция и ФРГ умоляют Лаврова о встрече
10.06.2026 14:17:55 | Life.ru

"Пари НН" должен подтвердить участие в Единой лиге ВТБ до 15 июня
10.06.2026 14:17:48 | ТАСС

Mercedes договорился о создании системы ПВО с поставщиком дронов на Украину
10.06.2026 14:17:00 | Lenta.ru

Главы МИД стран ОДКБ подписали документы в ходе заседания в Казани
10.06.2026 14:16:49 | ТАСС

Германия и Франция выступили за временные ограничения для Украины при голосовании в ЕС
10.06.2026 14:16:35 | Lenta.ru

В Грозном автомобиль влетел в пожарное депо, двое спасателей погибли
10.06.2026 14:16:28 | Life.ru

Россиянка месяц фотографировалась с трупом дочери
10.06.2026 14:16:00 | Lenta.ru

В Москве простились с заслуженной артисткой РФ Жуковской
10.06.2026 14:16:00 | ТАСС

В России спрогнозировали ситуацию на рынке парковочных мест в новостройках
10.06.2026 14:15:55 | Lenta.ru

В Чебоксарах начали восстанавливать поврежденные сети после ракетной атаки
10.06.2026 14:15:17 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro