Qwen3.5 35B-A3B

Qwen3.5-35B-A3B — открытая модель из средней части линейки Qwen3.5. Alibaba выпустила её вместе с Qwen3.5-27B и Qwen3.5-122B-A10B спустя восемь дней после флагманской Qwen3.5-397B-A17B. Модель построена как смесь экспертов (mixture of experts): всего в ней 35 млрд параметров, но на каждый токен работают около 3 млрд. Внутри 256 «экспертов» — небольших подсетей, и на каждый токен включаются девять: восемь выбираются под задачу, а один общий работает всегда. Архитектура гибридная: в трёх слоях из каждых четырёх стоит Gated DeltaNet — упрощённое линейное внимание, которое дешевле обрабатывает длинные тексты, а в каждом четвёртом слое — обычное внимание.

Главное отличие от Qwen3 в том, что Qwen3.5 с самого начала учили на тексте, картинках и видео вместе. В Qwen3 зрение добавляли отдельной моделью Qwen3-VL. Компания заявляет, что 35B-A3B обходит её прошлые крупные модели Qwen3-235B-A22B-2507 и Qwen3-VL-235B-A22B, хотя активных параметров у неё в семь раз меньше. По словам лаборатории, дело в архитектуре, качестве данных и обучении с подкреплением, а не в размере. В облаке Alibaba эта же модель доступна под названием Qwen3.5-Flash, и там у неё по умолчанию контекст до миллиона токенов и встроенные инструменты.

Модель берут для работы с текстом, документами, изображениями и видео, для программирования и для агентов — программ, которые сами выполняют задачу по шагам. В карточке модели лаборатория приводит такие результаты: 85,3 на MMLU-Pro, 84,2 на GPQA Diamond, 69,2 на SWE-bench Verified (исправление настоящих ошибок в коде) и 75,1 на MMMU-Pro (задачи с картинками). По заявлению лаборатории, модель понимает 201 язык и диалект. Веса открыты под лицензией Apache 2.0: модель можно разворачивать без Alibaba, дообучать и встраивать в свои продукты, в том числе коммерческие.

По умолчанию модель рассуждает перед ответом, но этот режим можно отключить. Рассуждения занимают много места: обычно лаборатория советует оставлять на ответ 32 768 токенов, для сложных задач — до 81 920. Контекст она просит не сокращать меньше 128 тысяч токенов, иначе модель хуже рассуждает. В карточке модели на входе указаны текст, изображения и видео. В апреле 2026 года её сменила Qwen3.6-35B-A3B того же размера: по словам лаборатории, новая версия лучше справляется с агентным программированием и может сохранять рассуждения из прошлых сообщений.

источники:Карточка модели на Hugging Face ↗Репозиторий Qwen на GitHub ↗Карточка сменившей её Qwen3.6-35B-A3B ↗