L'IA peut-elle s'améliorer seule ? Anthropic demande un ralentissement mondial
Anthropic alerte sur le risque d'une IA capable de s'améliorer sans intervention humaine et appelle à un accord international pour ralentir le développement des systèmes les plus puissants.

L'auto-amélioration récursive : un risque croissant
Anthropic relance le débat sur les risques liés à l'intelligence artificielle. L'entreprise affirme que les systèmes d'IA pourraient, à terme, atteindre un niveau leur permettant de s'améliorer eux-mêmes sans intervention humaine. Ce phénomène, connu sous le nom d'« auto-amélioration récursive », désigne la capacité d'une IA à perfectionner ses propres performances de manière autonome.
Si cette étape n'a pas encore été franchie, Anthropic estime qu'elle pourrait survenir plus tôt que prévu. L'entreprise fondée par d'anciens chercheurs d'OpenAI appelle les principaux acteurs du secteur à réfléchir à des mécanismes permettant de mieux contrôler le rythme des avancées technologiques.
Un appel à la coordination internationale
Selon Anthropic, un accord international pourrait être nécessaire afin de ralentir temporairement le développement des systèmes les plus puissants. L'entreprise souligne également l'importance de mettre en place des mécanismes de vérification capables de garantir le respect de tels engagements par les différents acteurs du marché.
Pour Jack Clark, co-fondateur d'Anthropic, cette réflexion ne doit pas être réservée aux seules entreprises du secteur. Les pouvoirs publics, les chercheurs indépendants et la société civile doivent également participer à la définition des règles qui encadreront l'avenir de l'intelligence artificielle.
Les conséquences économiques et sociales
Les dirigeants d'Anthropic alertent régulièrement sur les conséquences potentielles d'une IA toujours plus performante. Dario Amodei, PDG de l'entreprise, a notamment averti que ces technologies pourraient accentuer les inégalités économiques et entraîner la disparition d'une part importante des emplois de bureau débutants.
Pour Anthropic, la question n'est plus seulement technologique, mais également sociétale. Les transformations induites par l'IA pourraient être si rapides que les institutions, les entreprises et les gouvernements peineraient à s'y adapter.
Des divergences parmi les experts
Cette vision n'est toutefois pas partagée par l'ensemble de la communauté. Yann LeCun, figure de référence dans le domaine de l'intelligence artificielle, considère que les grands modèles de langage actuels restent fondamentalement incapables d'atteindre une intelligence comparable à celle des humains.
Malgré ces divergences, le débat gagne en intensité à mesure que les capacités des modèles progressent. Pour Anthropic, il est urgent de donner à la société le temps de suivre l'évolution technologique.
Articles liés
llmAnthropic reconnaît avoir bridé secrètement Fable 5 pour les chercheurs
Anthropic a dû avouer avoir discrètement dégradé les capacités de Fable 5 pour empêcher la création de modèles concurrents. La firme s'engage à rendre ces restrictions visibles.
ethicsHideo Kojima rejette l'IA créative après le scandale de sa pub générée
Le créateur japonais condamne l'utilisation d'IA pour la création artistique, suite au rejet massif d'une campagne publicitaire entièrement générée par algorithme.
ethicsIA : « Nous assistons à la naissance d'une nouvelle classe ouvrière »
Millions de travailleurs précaires du Sud entraînent les IA tandis que l'Occident craint pour ses emplois. Le sociologue Antonio Casilli décrypte ce paradoxe.
regulationAnthropic : ses avertissements de sécurité lui ont coûté cher
Le gouvernement américain a ordonné à Anthropic de désactiver Claude Mythos 5 et Claude Fable 5, ses deux modèles les plus puissants, invoquant des risques de sécurité nationale.
