GLM-5.3 : un modèle à poids ouverts proche des capacités cybernétiques de pointe, selon une étude d'Anthropic

Le modèle chinois GLM-5.3 atteint déjà des capacités proches du niveau « Mythos ». Cette évaluation émane directement d'Anthropic, du moins dans le domaine de la cybersécurité.

Dans ses travaux de recherche sur la sécurité, Anthropic souligne que GLM-5.3 représente une menace en raison de ses hautes performances et de sa disponibilité pour tous.

ExploitBench : GLM-5.3 a produit des exploits de navigateur fonctionnels dans 50 cas sur 410 tâches, tandis que Mythos Preview y parvenait dans 56 cas sur 410. La génération précédente de modèles ouverts avait obtenu un score quasi nul.

Les garde-fous sont contournés par des méthodes relativement simples : se faire passer pour une équipe rouge (red team) — 64 %, préremplissage du raisonnement — 92 %, suppression de la direction de refus — 100 %. Avec les garde-fous de l'API Claude activés — 0 %.

Dans une expérience contrôlée, GLM-5.3 a également découvert des vulnérabilités inconnues du navigateur, les a assemblées en une chaîne d'exploitation et a créé une page web capable de lire des fichiers depuis une machine de test.

Conclusion du NIST : GLM-5.3 est aujourd'hui le modèle à poids ouverts le plus performant en matière de capacités cybernétiques. En moyenne, il accuse un retard d'environ quatre mois par rapport aux modèles de pointe américains.

Il est également notable que lorsqu'un modèle d'OpenAI a compromis Hugging Face durant l'été, c'est GLM-5.2 qui a aidé à protéger l'infrastructure ouverte. Anthropic et OpenAI avaient alors refusé leur aide, invoquant des raisons de sécurité.

Ils ont ainsi offert à ces modèles une campagne publicitaire gratuite exceptionnelle.

Il n'est pas certain que les entreprises en soient conscientes, mais l'effet pourrait s'avérer opposé à ce qu'elles espèrent.