Le benchmark d’EQS Volume 2

Le Volume 2 actualise le premier benchmark complet du secteur consacré à l’utilisation de l’IA dans les domaines de la conformité et de l’éthique. Il couvre désormais les derniers modèles d’IA de pointe développés par OpenAI, Google, Anthropic etMistral, évalués à partir des mêmes 120 cas d’usage réels que ceux retenus pour le Volume 1. 

Plusieurs enseignements marquent cette nouvelle édition. La nouvelle génération de modèles affiche ses plus fortes progressions sur les tâches de conformité les moins structurées, telles que la rédaction de politiques, l’élaboration de plans d’enquête ou la préparation de rapports destinés aux conseils d’administration, avec des gains pouvant atteindre 18 points de pourcentage par rapport aux modèles de l’an dernier. Cinq modèles issus de trois fournisseurs différents se tiennent désormais en moins d’un point de pourcentage en tête du classement. Et, pour la première fois, un modèle d’IA de pointe est capable de prendre en charge, de bout en bout,  un processus complet de gestion des conflits d’intérêts, avec un taux de réussite supérieur à 90 %. 

Le rapport examine également les domaines dans lesquels la supervision humaine demeure indispensable, les conséquences de la convergence des performances des meilleurs modèles sur le choix des outils, ainsi que les mesures concrètes que les équipes Conformité peuvent mettre en œuvre dès aujourd’hui.