Кастомный пайплайн BERTopic: как кластеризовать тексты и получить интерпретируемые темы с помощью LLM

16.05.2026 17:16:24 | Хабр

Хабы: Блог компании Ростелеком, Машинное обучение, Искусственный интеллект, Natural Language Processing

Привет, Хабр! Меня зовут Антон и я занимаюсь задачами NLP в компании Ростелеком Информационные технологии.

Если вам приходилось разбирать большие массивы текстов: отзывов, обращений в поддержку или комментариев, то вы знаете, насколько это трудоемкий процесс.

В статье я покажу, как автоматизировать этот процесс с помощью пайплайна BERTopic: от эмбеддингов и кластеризации до интерпретации тем. Особое внимание уделим тому, как встроить локальную LLM в пайплайн и получить человекочитаемые названия тем.

Подробнее

Читайте также

В Бразилии случайно рассекретили новый дорогой геймпад Xbox
16.05.2026 17:06:20 | ferra.ru

Российские ученые ускорили ИИ для анализа научных текстов на русском
16.05.2026 16:59:33 | ferra.ru

ИИ для генерации видео из фото: Выбираем лучшую нейросеть 2026 года для создания классных роликов
16.05.2026 16:52:28 | Хабр

На «Госуслугах» запустят карту укусов клещей
16.05.2026 16:22:13 | ferra.ru

Эксперт: биоэкопоселения вдоль Севморпути помогут развить науку и сберечь природу
16.05.2026 16:15:00 | ferra.ru

Анатомия production AI агента: разбор двух открытых промптов Anthropic
16.05.2026 15:35:55 | Хабр

Бесплатное место в облаке для Google-аккаунтов будет всего 5 ГБ. С нюансом
16.05.2026 15:06:21 | ferra.ru

ИИ съест экономику изнутри. А потом запустит ядерный апокалипсис
16.05.2026 14:55:34 | Хабр

Нашёл ли Докинз сознание в Claude? А если нет, то что он нашёл?
16.05.2026 14:30:22 | Хабр

OSINT для ленивых. Часть 10: Что у нас с фирмами в США?
16.05.2026 14:12:10 | Хабр

Как работают lambda-функции в Python: замыкания, позднее связывание и антипаттерны
16.05.2026 13:37:20 | Хабр

Атомная программа КНДР
16.05.2026 13:30:51 | Хабр

Российские ученые получили соединения против вируса оспы
16.05.2026 13:11:55 | ferra.ru

Показаны первые наушники-клипсы Xiaomi
16.05.2026 13:06:22 | ferra.ru

Робот-поводырь за 1600 $: как ИИ пришел туда, где раньше были только собаки и благотворительность
16.05.2026 13:05:48 | Хабр

Резиновый кирпич: история планшета Kalidor, опередившего эпоху
16.05.2026 13:01:45 | Хабр

Отечественный суперкартридж для старушки Mega Drive и его киллер-фичи
16.05.2026 12:46:07 | Хабр

Дубайская Emirates начала внедрять спутниковый интернет Starlink в самолёты Airbus A380 и Boeing 777
16.05.2026 12:43:52 | vc.ru

SELinux — Быстрый онбординг: типы, атрибуты, домены, политики и утилиты на практике
16.05.2026 12:37:56 | Хабр

Обзор наушников Commo Immersive и Commo One 2.0
16.05.2026 12:37:40 | Хабр

Генеральное исследование рынка ИИ-агентов и Zero-Employee Company
16.05.2026 12:13:43 | Хабр

AI-native компания: почему пора перестать делать продукты
16.05.2026 12:00:14 | Хабр

Multi-region quorum: «все регионы согласны» против «N из M»
16.05.2026 11:59:38 | Хабр

Свой P2P-файлообменник с блэкджеком и NAT punching: как пет-проект Z-Folder стал заменой облакам
16.05.2026 11:39:33 | Хабр

Хромосомы и их проблемы
16.05.2026 11:30:32 | Хабр

ИИ-автоматизация на пике спроса. Но кто будет управлять тем, что вы внедрили?
16.05.2026 11:24:09 | Хабр

В сеть слили подробности камер флагмана iQOO 16
16.05.2026 11:06:25 | ferra.ru

ФАС раскрыла картель в ИТ-закупках на 236 млн рублей с участием структуры «Софтлайн»
16.05.2026 11:05:03 | vc.ru

Сбер организовал первую лизинговую сделку на комплекс GigaChat Enterprise
16.05.2026 10:48:22 | ferra.ru

Пул объектов: паттерн эффективного управления памятью
16.05.2026 10:08:38 | Хабр

Нейросеть для бренда: ТОП-10 ИИ для логотипа, фирменного стиля и визуальной концепции
16.05.2026 09:56:00 | Хабр

Искусственный интеллект вместо менеджера, или Как ИИ-чатбот помогает мне продавать обучение в режиме 24/7
16.05.2026 09:41:14 | Хабр

Кешбэк-апокалипсис: у меня семь карт, смартфон с ИИ и я всё равно плачу не той картой
16.05.2026 09:27:17 | Хабр

Samsung будет использовать процессор Dimensity 9500. Вероятно, в планшетах
16.05.2026 09:06:32 | ferra.ru

Калькулятор VRAM для локальных LLM: Какие модели ИИ запустятся у вас на компьютере?
16.05.2026 09:04:21 | Хабр

Смотреть все

НОВОСТИ

В Запорожской области уничтожили колумбийского наёмника ВСУ
11.06.2026 03:48:15 | Life.ru

КСИР: Иран поразил 18 целей на авиабазах США на Ближнем Востоке
11.06.2026 03:47:40 | ТАСС

Politico: Трамп пропустит первый в США матч ЧМ по футболу
11.06.2026 03:46:19 | ТАСС

"Авирон" представит на "Иннопроме" БПЛА с грузоподъемностью 120 кг
11.06.2026 03:43:44 | ТАСС

Обломки БПЛА ВСУ попали в многоквартирный дом в Краснодаре, есть пострадавшие
11.06.2026 03:41:58 | Life.ru

IRNA: в Кередже в Иране произошли взрывы к западу от столицы
11.06.2026 03:40:04 | ТАСС

В Бахрейне сработали сирены воздушной тревоги
11.06.2026 03:37:09 | ТАСС

Иран атаковал американские базы на Ближнем Востоке
11.06.2026 03:37:00 | Lenta.ru

В российском регионе обломки беспилотника попали в многоэтажку
11.06.2026 03:36:05 | Lenta.ru

Росстандарт утвердил новый ГОСТ на методы испытаний обоев
11.06.2026 03:34:34 | ТАСС

Минздрав утвердил 15 новых медицинских специальностей
11.06.2026 03:34:16 | Life.ru

Мексика и Бразилия призвали снять эмбарго США с Кубы
11.06.2026 03:33:24 | ТАСС

Mehr: в нескольких районах Ирана вновь произошли взрывы
11.06.2026 03:32:51 | ТАСС

Московская жара повторила суточный рекорд 28-летней давности
11.06.2026 03:31:19 | Life.ru

Яровая: уже есть экономический эффект от новых мер против нелегальной миграции
11.06.2026 03:30:22 | ТАСС

Россиянка описала цены в санаториях на родине словами «давно не пенсионные»
11.06.2026 03:30:12 | Lenta.ru

Хирург установил скрытые камеры по всей больнице и следил за раздевавшимися пациентками
11.06.2026 03:30:07 | Lenta.ru

США и Иран начали боевые действия в районе Персидского залива. Перед этим Трамп и Пентагон анонсировали мощные удары
11.06.2026 03:29:18 | Lenta.ru

Трое жителей Краснодарского края пострадали из-за налета БПЛА
11.06.2026 03:28:49 | Коммерсантъ

Системы ПВО сбили 15-й БПЛА ВСУ на подлёте к Москве
11.06.2026 03:28:28 | Life.ru

В Краснодарском крае из-за атак БПЛА пострадали три человека
11.06.2026 03:27:26 | ТАСС

Трамп назвал число выпущенных по Ирану ракет Tomahawk
11.06.2026 03:27:00 | Lenta.ru

От побега до отравления: Эксперт назвал главные опасности, которые поджидают питомца на даче
11.06.2026 03:25:22 | Life.ru

Депутат Селезнев рассказал, когда дома в СНТ станет проще подключить к интернету
11.06.2026 03:25:07 | ТАСС

Эксперт Дзись рассказал, что нужно для воссоздания панорамы обороны Севастополя
11.06.2026 03:23:44 | ТАСС

Собянин: силы ПВО уничтожили еще один летевший на Москву БПЛА
11.06.2026 03:15:30 | ТАСС

Минздрав: у 26% мужчин 40-49 лет есть репродуктивные риски или заболевания
11.06.2026 03:13:05 | ТАСС

Иран нанёс удары по двум судам, которые пытались пересечь Ормузский пролив
11.06.2026 03:13:03 | Life.ru

Стало известно о погибших в результате атаки США на Иран
11.06.2026 03:12:00 | Lenta.ru

Nournews: Иран в ответ на удары США атаковал их объекты на Ближнем Востоке
11.06.2026 03:11:41 | ТАСС

Иран с помощью беспилотников ударил по силам 5-го флота ВМС США в Бахрейне
11.06.2026 03:11:41 | ТАСС

В ОП РФ выступили за корректировку механизма налоговой семейной выплаты
11.06.2026 03:10:19 | ТАСС

Выпущено обновление 1.3.1 для Grand Theft Auto 4 RTX Remix с улучшением реконструкции лучей
11.06.2026 03:07:04 | PlayGround.ru

Иран закрыл Ормузский пролив для танкеров и торговых судов после атаки США
11.06.2026 03:04:32 | Life.ru

В курском приграничье 22 храма из списка ОКН повреждены ВСУ
11.06.2026 03:01:36 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro