Lanzado 8 enero 2026. Hybrid SSM-Transformer MoE 12B activos / 52B totales. Mid-trained en 500B tokens curados con math/code y long docs. Li...
Hibrido SSM-Transformer (Mamba+Transformer) MoE: 398B total / 94B activos.