Flint-40B-A2.5B

Recursive 于 2026-10-21 发布的编码 agent 专用 MoE（Apache-2.0）：39.8B 总参 / 每 token 约 2.5B 激活（含输出头，纯 body 约 2.2B；官方尺寸记号 40B-A2.5B）。架构：49 层（2 层稠密 + 47 层 MoE），256 路由专家选 6 + 常驻共享专家；注意力为 35 层滑动窗口（513 token）+ 14 层全注意力，全注意力层无位置编码、滑窗层用 RoPE，每头 QK RMSNorm + attention sink。上下文 262,144 token，词表 150,144，训练截止 2026-06。发布评测：Terminal-Bench 2.1 54.9%、SWE-bench Pro v2 89.7%、SWE-bench Verified 74.2%（Recursive 自测口径，温度 1.0 / pass@1 ≥5 次均值）。BF16 权重约 80GB；社区 GGUF（unsloth）UD-Q4_K_XL 25.1GB、Q8_0 42.3GB、UD-IQ1_M 11.4GB。据 TechCrunch / WIRED 报道，该模型的主体由 AI 在不到 4 个月内构建完成。