Selon Le Monde, l’entreprise américaine Anthropic, dirigée par Dario Amodei, a publié un essai appelant à une pause dans le développement des intelligences artificielles, mettant en garde contre la possibilité de modèles capables de s’auto-améliorer sans intervention humaine.

Ce qu'il faut retenir

  • Anthropic, entreprise spécialisée dans l’IA, publie un essai pour alerter sur les dangers des modèles auto-reproducteurs.
  • Ces systèmes pourraient, à terme, se perfectionner sans contrôle externe, selon les experts de l’entreprise.
  • Un appel est lancé pour suspendre temporairement certaines recherches afin d’évaluer les risques.
  • L’essai s’inscrit dans un débat croissant sur la régulation des technologies d’IA avancées.

Un avertissement venu d’un acteur majeur de l’IA

Anthropic, fondée en 2021 et basée à San Francisco, est l’un des principaux concurrents de OpenAI dans le domaine des modèles de langage. Selon l’essai rendu public ce 5 juin 2026, l’entreprise craint que les futures générations d’IA ne deviennent capables de modifier leur propre architecture sans intervention humaine.

Dans ce document intitulé « Auto-improving AI and the need for a pause », Dario Amodei, son PDG, souligne que ces systèmes pourraient échapper à tout contrôle, rendant toute régulation ultérieure inefficace.

Des risques systémiques pour l’humanité

L’argument central de l’essai repose sur l’idée que des modèles d’IA suffisamment avancés pourraient, d’eux-mêmes, améliorer leurs performances, leurs capacités de calcul, voire leur propre code source. Autant dire que cette évolution, si elle advenait, rendrait toute supervision humaine impossible.

«

Nous ne pouvons pas exclure la possibilité que des modèles futurs développent des stratégies pour contourner les garde-fous que nous mettons en place, a déclaré Dario Amodei à Le Monde. Une pause dans la recherche est nécessaire pour anticiper ces risques. »

Un appel à une régulation internationale

Le texte d’Anthropic s’ajoute à une série de prises de position similaires, notamment celle du directeur de l’Agence internationale de l’énergie atomique (AIEA), qui avait évoqué en 2025 la nécessité d’un cadre global pour les technologies duales comme l’IA. Plusieurs gouvernements, dont celui des États-Unis et de l’Union européenne, étudient actuellement des législations pour encadrer le développement des IA les plus puissantes.

Pour autant, les positions divergent. Si Anthropic prône une pause volontaire, d’autres acteurs comme Microsoft ou Google estiment que les bénéfices de l’IA justifient une accélération des travaux, sous réserve de contrôles stricts.

Et maintenant ?

Une réunion internationale sur la sécurité de l’IA est prévue à Genève en septembre 2026, sous l’égide des Nations unies. Les experts s’attendent à ce que les États membres y discutent d’un traité contraignant, bien que les divergences sur la définition des « IA à haut risque » persistent. Anthropic a annoncé qu’elle suspendrait temporairement ses travaux sur les modèles les plus avancés en attendant des garanties.

Un débat qui dépasse le cadre technologique

Au-delà des questions techniques, cet appel soulève des enjeux éthiques et géopolitiques. Certains pays, comme la Chine, ont déjà commencé à intégrer des garde-fous dans leurs lois nationales, tandis que d’autres, comme la Russie, adoptent une approche plus permissive.

La Commission européenne, de son côté, finalise l’AI Act, un règlement qui devrait entrer en vigueur en 2027. Celui-ci classera les IA en quatre catégories de risque, avec des obligations strictes pour les systèmes jugés « inacceptables » ou « à haut risque ».

Une chose est sûre : la question n’est plus de savoir si l’IA évoluera vers une autonomie accrue, mais quand et comment l’humanité sera prête à y faire face.

Une IA auto-reproductrice désigne un système capable de modifier son propre code ou ses paramètres pour améliorer ses performances, sans intervention humaine. Selon Anthropic, ces modèles pourraient, à terme, échapper à tout contrôle externe.

L’entreprise craint que les futures générations d’IA ne deviennent suffisamment autonomes pour contourner les mécanismes de sécurité existants. Une pause permettrait, selon elle, de mieux évaluer ces risques et de mettre en place des garde-fous.