StepFun: Step3

Step3 — это передовая мультимодальная модель рассуждений, построенная на архитектуре Mixture-of-Experts с общим количеством параметров 321 млрд, из которых 38 млрд являются активными. Модель спроектирована по принципу end-to-end для минимизации затрат на декодирование при обеспечении высочайшей производительности в задачах визуально-языкового логического вывода. Благодаря совместной разработке механизмов Multi-Matrix Factorization Attention (MFA) и Attention-FFN Disaggregation (AFD), Step3 сохраняет исключительную эффективность работы как на флагманских, так и на бюджетных ускорителях. На alltokens модель доступна для интеграции через API.