Les poids du GLM-5.3 sont sortis, avec deux semaines de retard et après un examen de sécurité
Z.ai a publié les pondérations du GLM-5.3, un modèle spécialement formé pour détecter les vulnérabilités logicielles. Le délai entre le lancement et la sortie est la partie intéressante.
Z.ai a publié les poids du modèle pour GLM-5.3 sur Hugging Face, environ deux semaines après la mise en ligne du modèle lui-même et après ce que la société a décrit comme son examen des risques le plus approfondi à ce jour. Les poids sont les nombres entraînés à l’intérieur d’un modèle, ce qui en fait ce qu’il est. Les publier signifie que n’importe qui peut télécharger le modèle et l’exécuter sur son propre matériel, sans clé API ni surveillance de l’entreprise. GLM-5.3 est un modèle à mélange d’experts avec environ 744 milliards de paramètres, environ 40 milliards d’actifs par jeton et une fenêtre contextuelle stable d’un million de jetons. Les fichiers FP8 représentent environ 465 Go, il s’agit donc d’un modèle de centre de données et non d’un ordinateur portable.
La raison pour laquelle la sortie a pris deux semaines supplémentaires est ce qui rend cette histoire intéressante à lire. GLM-5.3 a été délibérément formé sur des données et des environnements pour détecter des vulnérabilités logicielles, un domaine dans lequel les modèles chinois étaient à la traîne par rapport aux systèmes frontières américains. Z.ai affirme que le modèle « a commencé à raisonner sur plusieurs étapes d’exploitation, formant des plans cohérents pour des chaînes d’exploitation complètes », et qu’en travaillant avec des équipes de sécurité en Chine, il a aidé à trouver 2 436 vulnérabilités dans 269 projets, dont certains vieux de 40 ans. Ces résultats sont enregistrés dans un registre public. Lorsque Z.ai a expédié la version précédente, GLM-5.2, les poids ont disparu dès le premier jour. Cette fois, ils ont d’abord effectué un examen.
Que se passe-t-il réellement ici : c’est le dilemme des pondérations ouvertes dans sa forme la plus aiguë. Un modèle véritablement efficace pour repérer les failles de sécurité est extrêmement utile aux défenseurs, qui sont en permanence en infériorité numérique et sous-financés. C’est également utile aux attaquants, et une fois que les pondérations sont publiques, il n’y a plus de bouton de rappel, pas de limite de débit, pas de conditions de service. Chaque sauvegarde intégrée au modèle peut être réutilisée par toute personne disposant des fichiers et de quelques GPU. La réponse de Z.ai a été une version par étapes : expédiez d’abord la version hébergée, révisez, puis publiez. Il s’agit là d’une voie médiane plutôt que d’une solution, et cela ne fait que gagner du temps. Il convient également de noter que la même semaine, plus de 100 entreprises ont signé un appel commun à une action collective sur la cyberdéfense de l’IA, ce qui indique que l’industrie sait que l’équilibre est inconfortable.
Ce que cela signifie pour vous : directement, très peu, à moins que vous n’exécutiez des outils de sécurité sur du matériel sérieux. Indirectement, cela vaut la peine de comprendre le métier dans lequel vous vivez. La même capacité qui permet à un défenseur d’analyser une base de code vieille de 40 ans à la recherche de failles permet à quelqu’un d’autre d’analyser la vôtre. La conclusion pratique pour une petite entreprise ou un développeur solo est peu glamour et inchangée : appliquez des correctifs rapidement, car la fenêtre entre une vulnérabilité qui devient détectable et exploitée ne cesse de se réduire. Pour tous les autres, ce qu’il est utile de noter est qu’un grand laboratoire a volontairement retardé une publication pour vérifier s’il y avait un danger, puis l’a quand même publiée. Cette tension va définir les prochaines années de l’IA ouverte, et il n’existe aucune version qui satisfasse tout le monde.
Sources
- poids du modèle zai-org/GLM-5.3 (Hugging Face)
- Zhipu AI publie GLM-5.3 et prétend qu’il s’agit du modèle de codage à poids ouverts le plus puissant (The Decoder)
- GLM-5.3 est ici avec des cybercapacités avancées (VentureBeat)
WikiSkill de Google permet aux agents IA de conserver un wiki de leurs propres erreurs
Un article de recherche de Google décrit des agents qui notent ce qui n'a pas fonctionné, le distillent en instructions réutilisables et s'améliorent nettement sans aucune reconversion. Un modèle 9B bat un modèle 27B.