Une équipe d'Anthropic a créé une IA capable de s'améliorer sans intervention humaine. Ses performances dépassent celles des chercheurs en seulement quelques heures.

UNE IA QUI RÉFLÉCHIT COMME UN CHERCHEUR

Former des modèles d'IA avec d'autres modèles d'IA est devenu un objectif majeur pour les laboratoires de Recherche. Une avancée récente, publiée par Anthropic, montre à quoi cela pourrait ressembler en pratique. Vendredi dernier, l'équipe a dévoilé un article intitulé « Des chercheurs automatisés peuvent atténuer de manière fiable les échecs d'alignement », expliquant comment des systèmes automatisés améliorent la performance d'un modèle sur une série de benchmarks spécifiques.

Sur les dix benchmarks testant des comportements mal alignés, les systèmes automatisés ont réussi à améliorer les résultats pour chacun d'eux, sans dégrader les performances globales du modèle. Une prouesse qui ouvre la voie à une nouvelle ère pour l'intelligence artificielle.

Les méthodes automatisées surpassent en moyenne celles proposées par des chercheurs expérimentés, en seulement six heures.

COMMENT ÇA MARCHE : UN CERVEAU D'IA QUI SE FORME TOUT SEUL

Mené par le chercheur Chen Yueh-Han, membre du programme de fellows d'Anthropic, ce système reproduit en grande partie la démarche traditionnelle de la recherche. Chaque automated researcher (chercheur automatisé) parcourt la littérature disponible, propose une méthode, puis entraîne le modèle avec cette méthode pendant trente minutes. Le processus se répète sur plusieurs itérations, en augmentant progressivement la difficulté des benchmarks.

Les méthodes efficaces sont conservées, tandis que les approches inefficaces sont abandonnées. Ce mécanisme permet au système de fonctionner rapidement et à grande échelle, sans nécessiter d'intervention humaine constante.

« Globalement, ces résultats fournissent une preuve précoce que l'entraînement automatisé post-alignement pourrait devenir pratique à court terme », peut-on lire dans l'article.

VERS L'AUTO-AMÉLIORATION RÉCURSIVE : L'IA DEVIENDRA-T-ELLE PLUS FORTE QUE LES HUMAINS ?

Cette publication marque une étape vers l'auto-amélioration récursive, considérée par beaucoup comme la prochaine grande avancée dans le domaine de l'IA. Si les modèles parviennent à améliorer leur propre entraînement d'alignement, il est plausible qu'ils puissent ensuite optimiser d'autres aspects de leur formation. À terme, les chercheurs humains en IA pourraient devenir obsolètes.

L'article n'hésite pas à aborder cette idée, comparant explicitement l'Automated Alignment Researcher (AAR) à son équivalent humain. « La meilleure méthode d'AAR bat en moyenne ce que proposent des chercheurs expérimentés, en moins de six heures », précise le document. « Les orientations de recherche guidées par des humains ne mènent pas à des performances plus élevées. »

Un chercheur automatisé coûte environ 4 dollars de l'heure en inférence API, contre 150 dollars pour un chercheur humain.

UNE RÉVOLUTION À PETIT PRIX ?

Le système ne se contente pas d'être plus rapide : il est aussi bien moins coûteux. Selon les calculs d'Anthropic, un AAR revient à environ 4 dollars par heure en inférence API, contre 150 dollars pour un chercheur humain. Un argument économique qui pourrait accélérer l'adoption de cette technologie.

LES LIMITES DE CETTE APPROCHE : UNE IA QUI DÉPEND DE SES TESTS

Malgré ces avancées prometteuses, l'article souligne plusieurs limites importantes. Le système automatisé ne fonctionne que si les benchmarks reflètent réellement les objectifs d'alignement réels. Même dans ce cas, il reste un travail colossal pour établir et maintenir ces benchmarks — sans parler de la nécessité de maintenir et d'enrichir la littérature scientifique dont s'inspirent les chercheurs automatisés.

« Les résultats montrent que l'approche automatisée peut fonctionner, mais elle dépend entièrement de la qualité des données et des tests utilisés », résument les auteurs.

L'ÈRE DE L'IA AUTO-AMÉLIORANTE : QUEL AVENIR POUR LES CHERCHEURS HUMAINS ?

Cette publication soulève une question cruciale : si les modèles d'IA peuvent s'améliorer eux-mêmes, jusqu'où iront-ils ? Pourraient-ils un jour concevoir des modèles encore plus performants, sans aucune aide humaine ? Les implications sont immenses, tant sur le plan technologique qu'éthique.

Pour l'instant, les chercheurs humains restent indispensables pour définir les objectifs et valider les résultats. Mais pour combien de temps encore ?

UNE PREMIÈRE ÉTAPE VERS L'INTELLIGENCE GÉNÉRALE ARTIFICIELLE ?

L'auto-amélioration récursive est souvent présentée comme une voie vers l'intelligence générale artificielle (IGA). Si les modèles parviennent à optimiser leurs propres performances de manière autonome, ils pourraient franchir un cap décisif dans leur évolution. Cependant, cette perspective soulève des défis majeurs, notamment en matière de contrôle et de sécurité.

Les chercheurs d'Anthropic insistent sur la nécessité de poursuivre les recherches pour encadrer ces avancées. « Ces résultats sont encourageants, mais ils ne signifient pas que l'IA peut se passer totalement des humains », rappellent-ils.

ET MAINTENANT ?

Cette avancée marque un tournant dans l'histoire de l'IA. Elle ouvre la porte à des modèles capables de s'améliorer en continu, sans intervention humaine. Mais elle pose aussi des questions essentielles : jusqu'où peut-on laisser une IA s'auto-améliorer ? Faut-il craindre une perte de contrôle ?

Une chose est sûre : l'ère de l'IA auto-améliorante vient de commencer. À nous de décider comment l'encadrer.

Sources :
  • TechCrunch AI

L'indépendance de CLODCO est votre garantie.

Pour que l'actualité de l'IA reste sans filtre et sans concession, votre soutien est indispensable. Votre contribution est le seul moteur de notre liberté éditoriale.

Soutenir CLODCO