\nDans un monde de technologie toujours stimul\u00e9 par l'\u00e9volution rapide de l'intelligence artificielle (IA), le suivi des performances et de l'impact potentiel sur les applications du monde r\u00e9el est devenu de plus en plus crucial. Des chercheurs du groupe Inclusion AI and Ant ont propos\u00e9 une \u00e9tape importante vers la r\u00e9alisation de cet objectif : un classement progressif du nouveau mod\u00e8le de langage (LLM) dont les donn\u00e9es proviennent d'applications existantes en production.\n<\/p>\n
\nCette proposition est apparue comme une r\u00e9ponse n\u00e9cessaire \u00e0 la tendance actuelle de l'\u00e9valuation comparative dans les environnements de laboratoire. Le d\u00e9faut de cette m\u00e9thode dominante est son manque de lien avec l'utilisation pratique sur le terrain. Elle n'aborde pas les \u00e9v\u00e9nements tangibles qui se produisent dans les applications r\u00e9elles aliment\u00e9es par ces mod\u00e8les linguistiques, n\u00e9gligeant les \u00e9ventuelles modifications, adoptions et probl\u00e8mes en temps r\u00e9el qui pourraient survenir lorsque la th\u00e9orie passe \u00e0 la pratique.\n<\/p>\n
\nLa recherche dans des environnements de laboratoire contr\u00f4l\u00e9s tient \u00e0 l'\u00e9cart de nombreuses variables, ce qui permet aux experts de se concentrer sur des facteurs sp\u00e9cifiques sans interf\u00e9rence ext\u00e9rieure. Bien que cela apporte de la clart\u00e9 \u00e0 la recherche, cela \u00e9loigne \u00e9galement l'\u00e9tude des \u00e9ventuelles applications et contingences du monde r\u00e9el, cr\u00e9ant ainsi une d\u00e9connexion.\n<\/p>\n
\nLe plus souvent, les r\u00e9alit\u00e9s du d\u00e9ploiement de ces grands mod\u00e8les linguistiques dans des applications r\u00e9elles en production impliquent des adaptations \u00e0 grande \u00e9chelle, des r\u00e9ponses \u00e0 des stimuli inattendus et des al\u00e9as techniques impr\u00e9vus. Ces aspects ne sont pas mis en \u00e9vidence dans la recherche en milieu contr\u00f4l\u00e9, mais sont des agents essentiels pour fa\u00e7onner l'efficacit\u00e9 fondamentale de la technologie de l'IA. C'est pr\u00e9cis\u00e9ment la raison pour laquelle le nouveau tableau de bord propos\u00e9 par Inclusion AI et Ant Group pourrait changer la donne.\n<\/p>\n
\nLe classement propos\u00e9 est con\u00e7u pour rassembler des donn\u00e9es r\u00e9elles provenant directement d'applications en production. Il s'\u00e9loigne des r\u00e9sultats th\u00e9oriques et montre comment ces mod\u00e8les se comportent r\u00e9ellement lorsqu'ils sont d\u00e9ploy\u00e9s dans des applications r\u00e9elles. L'objectif est de d\u00e9terminer les performances des diff\u00e9rents LLM face aux exigences r\u00e9elles des utilisateurs, leur efficacit\u00e9 \u00e0 r\u00e9pondre aux besoins des consommateurs et leur capacit\u00e9 d'adaptation dans un monde num\u00e9rique en constante \u00e9volution.\n<\/p>\n
\nCette approche rafra\u00eechissante offre \u00e0 la communaut\u00e9 technologique ce dont elle ne se rendait pas compte qu'il lui manquait : une structure de responsabilit\u00e9 pour le progr\u00e8s de l'IA en connaissance directe des performances dans le monde r\u00e9el. Cette avanc\u00e9e passionnante estompe la fronti\u00e8re entre les laboratoires de recherche et les environnements des utilisateurs finaux, promettant de rationaliser le processus d'\u00e9valuation de l'aptitude \u00e0 la mise en \u0153uvre et de l'impact probable des LLM ou de toute autre technologie d'IA.\n<\/p>\n
\nDans l'ensemble, l'initiative a \u00e9t\u00e9 plus que bien accueillie par la communaut\u00e9 technologique dans son ensemble, inspirant un changement de perspective sur la mani\u00e8re dont la recherche en IA pourrait devenir plus centr\u00e9e sur l'utilisateur et les technologies plus responsables de leurs implications dans le monde r\u00e9el. L'avenir de la recherche, non seulement sur les LLM, mais aussi sur l'IA en g\u00e9n\u00e9ral, semble de plus en plus prometteur \u00e0 mesure qu'elle se r\u00e9oriente du laboratoire vers le monde r\u00e9el, modifiant la mani\u00e8re dont nous comprenons, appr\u00e9cions et utilisons la technologie.\n<\/p>\n