François Chollet, ancien ingénieur de Google et chercheur influent en IA, cofonde une association à but non lucratif afin de concevoir des points de référence qui sonderont l’IA pour une intelligence “au niveau de l’homme”. À la tête de cette association, la fondation ARC Prize, se trouvera Greg Kamradt, ancien directeur de l’ingénierie chez Salesforce et fondateur du studio de produits IA Leverage. C’est lui qui assumera les rôles de président et de membre du conseil. La levée de fonds pour la Fondation ARC Prize débutera plus tard en janvier.
“Nous grandissons… pour devenir une véritable fondation à but non lucratif servant d’étoile du nord vers l’intelligence artificielle générale,” a déclaré Chollet dans une publication sur le site web de l’association. (Rappelons que l’Intelligence Artificielle Générale est un concept vague, mais qu’il est généralement compris comme l’IA capable d’accomplir la majorité des tâches que peuvent réaliser les humains.) “Nous essayons d’inspirer le progrès en valorisant [l’écart] en termes de capacités humaines de base.”
“Sachez que l’intelligence artificielle générale sera là lorsque la création de tâches qui sont faciles pour les humains mais difficiles pour l’IA deviendra simplement impossible.”
La Fondation ARC Prize s’appuiera sur l’ARC-AGI, un test développé par Chollet pour évaluer si un système d’IA peut efficacement acquérir de nouvelles compétences en dehors des données sur lesquelles il a été formé. Il se compose de problèmes de type puzzle où une IA doit générer la bonne grille “réponse” à partir d’une collection de carrés de différentes couleurs. Les problèmes ont été conçus pour forcer une IA à s’adapter à de nouveaux problèmes qu’elle n’a jamais rencontrés auparavant.
Chollet a introduit l’ARC-AGI (pour “Abstract and Reasoning Corpus for Artificial General Intelligence”) en 2019. Beaucoup de systèmes d’IA peuvent réussir des examens de type Olympiades de Maths et trouver des solutions potentielles à des problèmes de niveau doctoral. Mais jusqu’à cette année, le meilleur système d’IA ne pouvait réussir qu’un peu moins d’un tiers des tâches de l’ARC-AGI.
“A la différence de la plupart des points de référence de l’IA de pointe, nous n’essayons pas de mesurer le risque de l’IA avec des questions d’examen surhumaines”, écrit Chollet dans la publication. “Les futures versions du point de référence ARC-AGI se concentreront sur la réduction de [l’écart de capacité humaine] vers zéro”. En fin de compte, la vraie question sera de savoir comment la Fondation ARC Prize répondra aux critiques que Chollet a dû affronter pour avoir surestimé l’ARC-AGI en tant que point de référence en vue d’atteindre l’IA générale.
