Triton, Flash-attension, Sage-attension и bitsandbytes с Rocm7 в Windows

06.02.2026 18:57:02 | Хабр

Хабы: Искусственный интеллект, Машинное обучение

В конце января 2026 вышел triton-windows 3.6.0.post25, который позволяет использовать flash-attention, sage-attention (v1) и другие библиотеки, использующие Triton, на картах AMD с поддержкой rocWMMA в Windows.

Также, несмотря на то, что в официальном репозитории bitsandbytes еще не приняли PR для поддержки ROCm 7, его все же можно собрать, внеся небольшие изменения в код. Эти изменения я уже сделал в своем форке.

В этой статье я расскажу, как установить все это себе, а также для примера запустим пару тестов в ComfyUI, в том числе со свежей LTX-2, и сделаем Qlora адаптер для модели Gemma 3.

Подробнее

Читайте также

Энтузиасты осовременили культовый Nokia N8
06.02.2026 18:27:37 | ferra.ru

Нужен ли сегодня минимализм в софте?
06.02.2026 18:24:52 | Хабр

Морфемы против BPE: как лингвистика ускоряет обучение языковых моделей
06.02.2026 18:24:43 | Хабр

Видение будущего по Илону Маску
06.02.2026 18:15:21 | it-world

Часть мозга, которая предугадывает события. Ценой реорганизации памяти
06.02.2026 18:11:37 | Хабр

Архитектура будущего: как должны эволюционировать наземные комплексы обработки данных дистанционного зондирования Земли
06.02.2026 18:09:46 | Хабр

Canon показала специальную версию компактной камеры PowerShot G7 X III к 30-летия бренда
06.02.2026 18:07:10 | ferra.ru

STM32 + FREERTOS + SDIO + FATFS
06.02.2026 17:54:19 | Хабр

Запрет на поставки товаров на €360 млн в год: ЕС представил 20 пакет санкций против России
06.02.2026 17:44:34 | vc.ru

Уставшие сеньоры — почему «я просто кодер» больше не работает
06.02.2026 17:33:16 | Хабр

Апокалипсис как датасет: провал и наследие Николая Морозова
06.02.2026 17:17:54 | Хабр

МТС начал уведомлять, если члену семьи звонят мошенники
06.02.2026 17:03:08 | ferra.ru

Интеграция зависимостей в iOS через Carthage in the wild
06.02.2026 16:51:51 | Хабр

Криптовалюта, которую не нужно майнить
06.02.2026 16:43:50 | Хабр

СМИ: Nvidia не выпустит в этом году никаких новых видеокарт
06.02.2026 16:27:30 | ferra.ru

ИТ-архитектура как фактор устойчивости цепочек поставок
06.02.2026 16:15:05 | Хабр

Еврокомиссия пришла к выводу, что TikTok недостаточно ограничивает «вызывающие зависимость функции»
06.02.2026 16:12:29 | vc.ru

В Китае представили рободевушку Moya с подогревом тела
06.02.2026 16:07:11 | ferra.ru

Мифы и реальность про российский геймдев
06.02.2026 16:02:46 | Хабр

[Перевод] Прибыль Tesla обвалилась вдвое. Маск нашёл выход – и это не автомобили
06.02.2026 15:46:25 | Хабр

Я автоматизировал поиск работы, чтобы пройти тест Тьюринга у HR. Открытый эксперимент
06.02.2026 15:19:31 | Хабр

Продуктовая стратегия для высокотехнологичных рынков: как её написать и «продать» стейкхолдерам
06.02.2026 15:18:59 | Хабр

Революция в ИИ-вычислениях: Детерминированная рациональная арифметика с отложенным делением
06.02.2026 15:18:55 | Хабр

SOTA-модели из Китая, бесплатный аналог Suno, приложение Codex от OpenAI, реалтайм-аватары Lucy 2.0
06.02.2026 15:05:27 | Хабр

«Алмаз синема» вслед за структурами объединённой киносети «Синема парк» и «Формула кино» потребовала от бывшего офиса Sony в России возмещения «упущенной выгоды»
06.02.2026 15:03:06 | vc.ru

МегаФон стал лидером по скорости мобильного интернета в России
06.02.2026 14:32:14 | ferra.ru

Kotlin Symbol Processing: создаём свой процессор
06.02.2026 14:27:50 | Хабр

Почему OpenAI Assistants не подошёл для сложных AI-агентов
06.02.2026 14:26:48 | Хабр

С апреля 2026 года в России начнут выдавать иностранцам «визы талантов»
06.02.2026 14:24:47 | vc.ru

Cистема визуально-инерциальной навигации для дрона на C++
06.02.2026 14:16:45 | Хабр

NASA разрешило астронавтам брать с собой в космос iPhone и другие современные смартфоны, чтобы «фиксировать особые моменты»
06.02.2026 14:10:01 | vc.ru

Похоже, глобальную версию флагмана Huawei Mate 80 Pro покажут в конце февраля
06.02.2026 14:07:12 | ferra.ru

Java Digest #32
06.02.2026 13:52:21 | Хабр

Тестируем B200 от NVIDIA: живые бенчмарки с GLM-4.7
06.02.2026 13:45:15 | Хабр

Как безопасно продать криптовалюту (USDT) за рубли без P2P и блокировок 115-ФЗ161-ФЗ
06.02.2026 13:44:59 | Хабр

Смотреть все

НОВОСТИ

Трамп назвал Такера Карлсона человеком с низким IQ
17.04.2026 17:28:46 | Life.ru

В США заявили о возвращении на фондовый рынок «животного духа»
17.04.2026 17:28:45 | Lenta.ru

Путин заявил об ответственных задачах перед современным поколением просветителей
17.04.2026 17:27:26 | Life.ru

Майора полиции связали с кокаиновой подработкой в российском регионе
17.04.2026 17:26:53 | Lenta.ru

С начала года над Ленинградской областью сбили более 240 беспилотников
17.04.2026 17:26:17 | ТАСС

Футболистки сборной России и молодежной команды сыграли вничью
17.04.2026 17:25:14 | ТАСС

Генпрокуратура требует обратить в доход РФ имущество судьи Шепель на 1,35 млн рублей
17.04.2026 17:24:57 | ТАСС

СБ: представитель ЕК не хочет слышать о падении украинских БПЛА в странах ЕС
17.04.2026 17:24:51 | ТАСС

Токаев утвердил стратегию развития атомной отрасли до 2050 года
17.04.2026 17:24:38 | ТАСС

Названа цена самой дешевой квартиры у метро в Москве
17.04.2026 17:23:59 | Lenta.ru

В Ростовской области продлили льготы для многодетных семей до 2028 года
17.04.2026 17:23:56 | ТАСС

Каллас: ЕС призвал обеспечить свободный и бесплатный проход через Ормуз
17.04.2026 17:22:17 | ТАСС

Стармер: Британия и Франция возглавят миссию по защите свободы навигации в Ормузе
17.04.2026 17:22:08 | ТАСС

Деревянко пошутил про секс с женой
17.04.2026 17:21:57 | Lenta.ru

Reuters: Иран назвал разморозку активов условием полного открытия Ормуза
17.04.2026 17:21:21 | ТАСС

Ушедшие из России производители объявили отзыв сотен тысяч машин
17.04.2026 17:21:02 | Lenta.ru

Сын Натальи Водяновой показал фото с возлюбленной
17.04.2026 17:20:48 | Lenta.ru

Лукашенко: если США не могут справиться с Ираном, то лезть в Китай им не нужно
17.04.2026 17:20:31 | ТАСС

Митрополит Константин: люди в Африке видят в РПЦ большую сильную церковь
17.04.2026 17:20:07 | ТАСС

Лукашенко назвал действия США в Иране бездумной авантюрой
17.04.2026 17:19:54 | ТАСС

Меру пресечения фигурантам дела о хищении средств ПФР продлили
17.04.2026 17:19:49 | ТАСС

Захарян не вошел в заявку "Реал Сосьедад" на финал Кубка Испании
17.04.2026 17:19:42 | ТАСС

Швейцария и Всемирный банк договорились о модернизации железных дорог на Украине
17.04.2026 17:19:24 | ТАСС

Пчела сорвала вылет самолета с сотней пассажиров на борту
17.04.2026 17:19:17 | Lenta.ru

Лукашенко: США ничего не смогут сделать с Россией при помощи ракет
17.04.2026 17:18:49 | ТАСС

Адыгея отправила в Дагестан 80 тонн груза с соком и питьевой водой
17.04.2026 17:18:22 | ТАСС

Стоимость фьючерсов на драгметаллы растет
17.04.2026 17:18:06 | ТАСС

Минюст включил книгу Фридриха Юнгера в перечень экстремистских материалов
17.04.2026 17:17:52 | Life.ru

Следователи нашли связи руководителей профсоюза КТР с Украиной и Израилем
17.04.2026 17:17:31 | ТАСС

В Ленобласти в ДТП пострадали четыре человека
17.04.2026 17:17:14 | ТАСС

Фицо подтвердил, что Словакия будет против санкций ЕС до восстановления "Дружбы"
17.04.2026 17:16:33 | ТАСС

Глава ВС Бельгии Вансина придумал признание Россией некоей "Нарвской республики"
17.04.2026 17:16:00 | Российская Газета

В Архангельске пропал подросток
17.04.2026 17:15:29 | ТАСС

ФНС опровергла информацию, что под контроль переводов попадут 10 млн граждан
17.04.2026 17:14:57 | ТАСС

Экспертизы установят степень вины руководства ж/д в сходе с рельсов поезда под Ульяновском
17.04.2026 17:12:52 | ТАСС

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro