BigGo Finance en Startup Fortune meldden dat Moonshot AI op 4 november 2026 de volledige modelgewichten van Kimi K3.1 Pro op Hugging Face publiceerde (BigGo Finance; Startup Fortune). Moonshot had op 23 oktober aangekondigd dat de gewichten uiterlijk 4 november zouden verschijnen (aankondiging van Moonshot).
De modelkaart geeft ontwikkelaars twee concrete aanknopingspunten: de laagverdeling en instructies voor vLLM en SGLang.
Welke architectuur beschrijft Moonshot?
De modelkaart noemt 69 KDA-aandachtslagen en 24 Gated DSA-lagen. Moonshot zegt dat Gated DSA de full-attention Gated MLA-lagen van Kimi K3 vervangt en koppelt die wijziging aan efficiëntere verwerking van lange contexten (modelkaart van Moonshot op Hugging Face).
De kaart vermeldt ook 2,8 biljoen parameters in totaal, waarvan 104 miljard geactiveerde parameters, en een contextlengte van 1.048.576 tokens. Deze technische gegevens vullen NeoTeo’s eerdere bericht over Moonshots cyberdata-aanpak voor Kimi K3.1 Pro aan.
Instructies voor vLLM en SGLang
De repository bevat instructies om Kimi K3.1 Pro met vLLM en SGLang te draaien. Dat zijn de serveeropties die Moonshot bij het model vermeldt.
Moonshot zegt cyberdata uit Kimi K3.1 Pro te hebben gefilterd