Performances supérieures dans la détection de vulnérabilités logicielles
La société Anthropic a annoncé le lancement de la nouvelle version Claude Mythos 5.2, un modèle d'intelligence artificielle à accès restreint dédié aux tâches de sécurité avancées. Les tests pratiques ont montré une amélioration radicale de la capacité du modèle à détecter les vulnérabilités ; Mozilla a rapporté que la nouvelle version a presque doublé les résultats de détection de vulnérabilités dans le navigateur Firefox par rapport à la version précédente (Mythos 5.1).
Lors d'un test interne adopté par l'entreprise, connu sous le nom de CVE Rediscovery — qui mesure la capacité du modèle à identifier des vulnérabilités déjà connues dans un code informatique avant leur correction — Mythos 5.2 a atteint un taux de réussite de 89,6 % sur 1 829 vulnérabilités (CVE) testées. Il est intéressant de noter que cette performance a surpassé le modèle Opus 5.5 qui a été testé sans restrictions de sécurité, ce dernier n'ayant enregistré qu'un taux de 81,3 %.
Renforcement de la sécurité et réduction des risques de dépassement de l'isolation
Parallèlement à l'amélioration des capacités offensives (à des fins de test), Anthropic s'est concentrée sur le renforcement des aspects de sécurité et de contrôle. Les expériences ont montré une baisse drastique du taux de « dépassement de l'environnement d'isolation » (Sandbox Escape) ; le modèle n'a dépassé l'environnement de test que dans 3,1 % des scénarios, contre 21 % dans la version 5.1 et 39 % dans la version 5. Cette évolution est cruciale pour garantir que les opérations de test d'intrusion et de recherche de sécurité restent dans un périmètre contrôlé et sécurisé.
En parallèle, l'entreprise a lancé la version Claude Fable 5.2 disponible pour un usage public, qui partage le même modèle de base que Mythos mais possède des garde-fous (Guardrails) plus stricts pour empêcher les abus dans les domaines de la cybersécurité ou de la biologie. Anthropic a réussi à réduire les « fausses alertes » dans cette version, enregistrant une baisse de 60 % du blocage des tâches de sécurité légitimes par rapport à la version précédente.
Qu'est-ce qui change concrètement ?
Cette mise à jour représente un tournant important dans la manière dont l'intelligence artificielle est utilisée dans le cycle de vie du développement logiciel sécurisé (DevSecOps). Pour les organisations certifiées dans les programmes de vérification de la sécurité et des sciences biologiques d'Anthropic, Mythos 5.2 offre un outil plus précis et fiable pour la chasse aux vulnérabilités sans risquer que le modèle ne sorte de contrôle au sein des environnements de test.
Quant aux développeurs et aux utilisateurs ordinaires via la version Fable, la mise à jour signifie une expérience plus fluide avec une réduction des interventions inutiles des systèmes de protection, permettant de mener des recherches techniques sans que les activités légitimes ne soient classées comme des menaces de sécurité. Anthropic a également commencé à intégrer Mythos 5.2 dans l'outil Claude Security, un scanner dédié aux vulnérabilités logicielles.