Les machines dépassent-elles nos capacités ? L’OCDE vient de publier un rapport sur les capacités des IA et les comparent à nos capacités humaines.
30 informaticiens, psychologues et spécialistes de l’évaluation ont élaboré des indicateurs gradués de 1 à 5. Ils permettent de mesurer “la progression de l’IA depuis des tâches simples jusqu’à des tâches complexes, distinguent les avancées majeures d’ordre qualitatif et livrent une véritable compréhension des capacités de l’IA en comparaison avec les compétences humaines“.
Ces échelles visent à englober tous les types de systèmes d’IA et de robotique. Ces indicateurs permettent à chacun de connaitre les réelles performances des outils à l’instant T.
| Indicateur | Description | Niveau actuel de l’IA (nov. 2024) |
|---|---|---|
| Langage | Compréhension, génération et raisonnement linguistique. | Niveau 3 |
| Interaction sociale | Reconnaissance des émotions, adaptation contextuelle, communication non verbale. | Niveau 2 |
| Résolution de problèmes | Capacité à résoudre des problèmes complexes et à s’adapter à de nouvelles situations. | Niveau 2 |
| Créativité | Génération d’idées originales, innovation et expression artistique. | Niveau 3 |
| Métacognition et pensée critique | Capacité à réfléchir sur ses propres processus cognitifs et à évaluer des arguments. | Niveau 2 |
| Connaissances, apprentissage et mémoire | Acquisition, stockage et récupération d’informations, apprentissage continu. | Niveau 3 |
| Vision | Perception visuelle, reconnaissance d’objets et interprétation d’images. | Niveau 3 |
| Manipulation | Contrôle physique précis, coordination motrice et interaction avec l’environnement. | Niveau 2 |
| Intelligence robotique | Intégration de la perception, de la planification et de l’action dans des systèmes robotiques autonomes. | Niveau 2 |
“Ces évaluations reflètent l’état de l’art en novembre 2024. Par exemple, les grands modèles de langage (LLM) sont classés au niveau 3 en langage, démontrant une compréhension avancée mais encore limitée par des problèmes tels que les hallucinations ou le raisonnement logique imparfait” prévient l’OCDE.
Cette version bêta des indicateurs sur les capacités de l’IA constitue une base précieuse permettant de comprendre ce que l’IA est capable de faire et ce qu’elle n’est pas capable de faire. “Toutefois, pour faire progresser ce cadre, il faudra une collaboration plus approfondie avec une communauté d’experts plus large” précisent les auteurs.
Ces indicateurs offrent une grille utile qui permet également d’anticiper les impacts de l’IA sur l’emploi, l’éducation et la régulation… Ils soulèvent également deux questions majeures : comment encadrer une IA aux capacités cognitives avancées sans brider l’innovation ? Et surtout, combien de temps encore l’humain conservera-t-il l’avantage ?
