Zhipu AI, une start-up chinoise spécialisée dans l’IA fondée en 2019, a récemment lancé son agent d’IA gratuit auprès du grand public. Baptisée AutoGLM Rumination, cette nouvelle solution, qui a déjà obtenu plusieurs millions de dollars de financements soutenus par les pouvoirs publics, fait la une dans tout le secteur. ;
Qu’est-ce qu’AutoGLM Rumination ?
AutoGLM Rumination est l’un des tout nouveaux agents d’IA à faire son entrée sur le marché grand public. Il est capable d’effectuer des recherches simples sur le Web, ainsi que des tâches de recherche plus avancées. Parmi les utilisations actuelles d’AutoGLM Rumination figurent la rédaction technique et la planification de voyages.
L’agent d’IA repose sur deux grands modèles de langage propriétaires de Zhipu AI : GLM-4-Air-0414 et GLM-Z1-Air. Pour évaluer ces modèles de langage par rapport à ceux de la concurrence, il est essentiel d’examiner les données de référence disponibles.
Évaluer la concurrence à l’aide de tests de référence
Bien qu’ils ne soient opérationnels que depuis quelques années, les développeurs de Zhipu AI ont formulé des affirmations ambitieuses concernant les performances de leurs outils d’IA générative. Les développeurs affirment que GLM-Z1-Air est huit fois plus rapide que DeepSeek-R1 ; il y parviendrait tout en n’utilisant qu’une fraction de la puissance de calcul.
Un article de recherche publié en juin 2024 montre que le modèle de langage le plus récent de Zhipu AI, GLM-4, surpasse GPT-4 d’OpenAI dans de nombreux tests de référence. Les auteurs de l’article ont déclaré que GLM-4 « rivalise étroitement avec GPT-4 ou le surpasse en termes de métriques générales telles que MMLU, GSM8K, MATH, BBH, GPQA et HumanEval ».
Cependant, il reste en retrait par rapport à d’autres types de modèles d’IA, comme Claude 2, Claude 3 Opus, Gemini 1.5 Pro et GPT-4 Turbo, dans certains domaines. En programmation Python et Java, par exemple, GLM-4 est le seul modèle de Zhipu AI à obtenir un score suffisamment élevé pour constituer une véritable concurrence — et même lui accuse un retard sur les meilleurs modèles dans NaturalCodeBench.
Bien que GLM-4 arrive en tête de nombreux tests de référence sur LongBench-Chat, GLM-4-Air et GLM-4-9B-Chat n’ont pas obtenu d’aussi bons résultats. Tous deux ont eu du mal à suivre la concurrence dans les tests de référence en anglais, mais les trois modèles ont obtenu de bons résultats dans les tests en chinois.
Une contribution à la communauté open source
Zhipu AI a apporté de nombreuses contributions à la communauté de l’IA open source et a cumulé plus de 10 millions de téléchargements pour ses précédentes versions. Parmi celles-ci :
- ChatGLM-6B
- GLM-4-9B
- GLM-4V-9B
- WebGLM
- CodeGeeX
Malgré l’arrivée sur le marché de nombreuses start-up spécialisées dans l’IA avec leurs propres solutions, les développeurs de Zhipu AI commencent déjà à se faire remarquer. AutoGLM Rumination n’est que le dernier-né d’une série de produits reposant sur l’IA, et il est probable que Zhipu AI fasse encore parler d’elle dans un avenir proche.