Модели Minimax в Tokenator

MiniMax-M3 — это многомодальная базовая модель от MiniMax. Она поддерживает ввод текста, изображений и видео с текстовым выводом, контекстное окно в 1 миллион токенов и подходит для долгосрочной работы с агентами, программирования и использования инструментов. Она построена на основе механизма MiniMax Sparse Attention (MSA), который заменяет полное внимание выбором KV-блоков, что сокращает вычислительные затраты на каждый токен при большом контексте — примерно в 20 раз меньше, чем у предыдущего поколения при 1 миллионе токенов, с существенно более быстрым предварительным заполнением и декодированием при сохранении качества в большинстве задач. Модель, обученная как нативная многомодальная модель на чередующихся данных и настроенная для многоэтапного, подобного производственному, сотрудничества с помощью интерактивной пользовательской симуляционной среды, ориентирована на устойчивые многошаговые задачи, а не на выполнение за один ход.