Новини›بقيت›Alibaba пусна Qwen4-Max с 2,4 трилиона параметъра и контекст от 1 милион токена
بقيت

Alibaba пусна Qwen4-Max с 2,4 трилиона параметъра и контекст от 1 милион токена

MarkTechPost · понеделник, 16 ноември, 11:44 · 1 мин четене

Alibaba представи Qwen4-Max, първия модел от новото поколение Qwen4. Това е затворен модел с архитектура sparse MoE, 2,4 трилиона параметъра, от които 71 милиарда са активни за всеки токен. Приема текст, снимки и видео и работи с контекст от 1 милион токена, което позволява да се обработват много дълги документи и сложни задачи наведнъж.

По данни на компанията архитектурата е подобрена в три места: вниманието, остатъчните връзки и вграждането. При обучението на модела на този мащаб не са се появили скокове в загубата. В собствени тестове базовата версия показва с 5 до 13 процента по-ниска стойност на битове на байт в сравнение с Qwen3.8-Max, като активира с 25 процента по-малко параметри.

В собствения тест Work360, който обхваща 26 основни области и 721 специализирани полета, Qwen4-Max получава 52,69 точки, срещу 47,74 при Qwen3.8-Max. Токените намаляват с около 24 процента при висок режим на усилие и с около 35 процента при средно.

По отделен начин моделът е достъпен в QwenCloud под идентификатора qwen4-max. Работи с клиенти, съвместими с OpenAI и Anthropic, и поддържа извикване на функции, структурирани отговори, кеширане и фина настройка. Режимът на разсъждение се включва с параметъра enable_thinking. Засега достъпът е само през план Token Plan.

Още новини