NVIDIA et l'institut bulgare INSAIT développent une plateforme pour évaluer les modèles d'IA en robotique.
Le géant technologique NVIDIA et l'Institut d'informatique, d'intelligence artificielle et de technologie (INSAIT) de l'Université de Sofia ont développé une plateforme appelée LADDER qui permet aux chercheurs d'évaluer et de comparer les capacités des principaux modèles d'intelligence artificielle (IA) à contrôler des robots lorsqu'ils effectuent des séquences d'actions, a déclaré le centre de presse du ministère de l'Éducation et des Sciences.
Bien que l'IA puisse désormais résoudre des problèmes mathématiques complexes et que les robots humanoïdes puissent effectuer des mouvements impressionnants, le contrôle des robots dans l'exécution de tâches quotidiennes demeure un défi scientifique majeur. Déplacer un seul objet est relativement facile, mais lorsqu'un robot doit déplacer plusieurs objets successivement, le risque d'erreurs augmente considérablement.
Ce projet se concentre sur l'un des domaines les plus prometteurs de la technologie moderne : l'IA physique, dans laquelle les systèmes d'IA doivent non seulement traiter l'information, mais aussi interagir avec le monde réel.
NVIDIA est l'un des géants technologiques mondiaux, dont les développements sous-tendent la révolution de l'IA. L'entreprise joue un rôle majeur dans le développement des modèles d'IA les plus performants, et la robotique et l'IA physique figurent parmi ses priorités stratégiques. C'est dans ce domaine que les recherches menées par l'INSAIT (institut bulgare de recherche) ont attiré l'attention de NVIDIA, qui a reconnu leur potentiel et s'est associée à l'initiative pour les développer. De cette collaboration est née la plateforme LADDER, qui pourrait devenir une référence importante pour évaluer les progrès en robotique et le développement de la prochaine génération de robots intelligents. Ce partenariat témoigne de la reconnaissance du potentiel de recherche de l'INSAIT et de son rayonnement parmi les centres de recherche internationaux, souligne le communiqué de presse.
Les premiers résultats montrent que même les systèmes les plus performants sont encore loin de pouvoir contrôler des robots de manière fiable. Parmi les modèles en tête du classement figurent GPT-6 Astra, Claude Opus 5.5 et Gemini 4 Argon. Bien qu'ils surpassent les autres modèles, ils échouent à accomplir une part importante des tâches. Lors des tests les plus exigeants, qui impliquent huit à dix actions consécutives, même les modèles les plus performants ne réussissent qu'environ un tiers des tentatives. Les modèles spécifiquement conçus pour le contrôle de robots rencontrent des difficultés encore plus grandes. L'un des modèles les plus performants de cette catégorie peut déplacer un objet isolé, mais ne parvient quasiment jamais à effectuer cinq actions consécutives ou plus.
L'étude met également en lumière un autre défi majeur : le coût élevé de l'utilisation des modèles d'IA les plus performants. Pour certains modèles, le coût moyen de la réussite d'une seule tâche dépasse 6 USD, tandis qu'une évaluation complète, impliquant près de 2 000 tentatives, coûterait environ 8 000 USD.
La plateforme est accessible à tous et sera mise à jour avec les résultats des nouveaux modèles d'IA. Les classements, les vidéos illustrant les tâches effectuées et l'article de recherche complet sont disponibles sur https://ladderrobotics.ai.
Le 23 octobre, Google a fait un nouveau don d'un million de dollars à l'INSAIT. Ce don marque une nouvelle étape dans le partenariat stratégique entre Google et l'institut de recherche bulgare. Le soutien total de Google à l'INSAIT dépasse désormais les sept millions de dollars, un niveau de soutien sans précédent pour la Bulgarie et la région, a souligné l'université.
L'INSAIT est le premier établissement d'Europe de l'Est à offrir un environnement de recherche de niveau international, comparable à celui des plus grandes universités et instituts de recherche occidentaux. Unité dédiée au sein de l'Université de Sofia, l'INSAIT a été fondé en partenariat avec l'ETH Zurich et l'EPFL, deux des plus prestigieuses universités techniques au monde. Des scientifiques de renom issus des meilleures universités et laboratoires de recherche des États-Unis, d'Europe et d'Israël dirigent et conseillent l'institut. L'INSAIT a pour vocation l'excellence scientifique : mener des recherches de pointe, attirer des scientifiques de renommée internationale aux réalisations exceptionnelles et former la prochaine génération d'étudiants et de futurs leaders technologiques.