QbitAI a rapporté le 4 novembre que le laboratoire 狮子山人工智能实验室, rattaché à 招商局先进技术研究院, avait publié Lion-ER-35B-A3B, un modèle visuel-langagier à mélange d’experts pour le raisonnement incarné. L’article lui attribue environ 35 milliards de paramètres au total, dont quelque 3 milliards activés par jeton.
L’article indique que le jeu d’entraînement supervisé compte 312 380 échantillons.
Dans l’évaluation du laboratoire, menée avec quatre réponses par question (avg@4), le modèle obtient une moyenne pondérée à parts égales de 65,29 sur dix benchmarks publics ; il s’agit de résultats rapportés par le laboratoire.
Selon QbitAI, les poids sont publiés sur Hugging Face au format BF16 Safetensors et sont compatibles avec Transformers, vLLM et SGLang.
Source: QbitAI ↗