MoonshotAI: Kimi K2 0905

Метрики

Технический обзор

Kimi K2 0905 — это сентябрьское обновление модели Kimi K2 0711. Она представляет собой крупномасштабную языковую модель с архитектурой Mixture-of-Experts (MoE), разработанную Moonshot AI. Общее количество параметров составляет 1 триллион, из которых 32 миллиарда активны при каждом проходе. Модель поддерживает работу с длинным контекстом до 256 000 токенов, что вдвое больше предыдущего лимита в 128 000. Данное обновление повышает эффективность написания кода в режиме агента, обеспечивая более высокую точность и улучшенную обобщающую способность при работе с различными фреймворками. Также улучшена фронтенд-разработка: модель создает более эстетичные и функциональные результаты для веб-интерфейсов, 3D-графики и смежных задач. Kimi K2 оптимизирована для агентских функций, включая продвинутое использование инструментов, логическое рассуждение и синтез кода. Модель демонстрирует отличные результаты в бенчмарках по программированию (LiveCodeBench, SWE-bench), логике (ZebraLogic, GPQA) и работе с инструментами (Tau2, AceBench). При обучении использовался инновационный стек технологий, включающий оптимизатор MuonClip для обеспечения стабильности тренировки масштабных MoE-систем. Модель доступна через API на платформе alltokens.

Смежные подборки

Сравнение с похожими моделями

FAQ