第一财经

Anthropic dévoile son développement d'IA automatisée pour le traitement des données, mettant la pression sur des concurrents tels qu'OpenAI.

原文:Anthropic公开AI研发自动化数据,透明化压力给到OpenAI等竞品

Résumé essentiel : L'IA commence à se « réparer toute seule », mais le volant reste entre les mains des humains

En bref, Anthropic (le développeur de Claude) a révélé un ensemble de données très impressionnantes, montrant au monde que l'IA participe à grande échelle à la recherche et au développement de l'IA elle-même.

En août de cette année, 26 % des travaux de recherche et développement en IA au sein d'Anthropic étaient menés par l'IA (les humains se contentant de fixer les objectifs et de vérifier le résultat final), tandis que ce pourcentage n'était pas encore de 1 % en février. Cela signifie que, en seulement six mois, l'IA est passée d'un assistant auxiliaire à un acteur principal.

Bien que l'IA puisse maintenant corriger des bogues, écrire du code, effectuer des tests et même collaborer avec d'autres IA, aucun de ces travaux n'a atteint le niveau d'« autonomie totale » (AL5). En d'autres termes, l'IA ne peut pas décider par elle-même de ce qu'elle doit étudier, ni agir entièrement sans surveillance humaine. Cette révélation ne montre pas seulement l'avancement réel de la technologie, mais ressemble aussi à une « bombe de transparence » lancée dans l'industrie, forçant les autres grandes entreprises à révéler leurs propres données.

---

Analyse approfondie : Comprendre cette « évolution autonome de l'IA » à travers cinq dimensions

1. Du « soutien » à la **direction » : Un changement qualitatif en six mois

Si l'on compare la recherche et le développement en IA à une entreprise, l'IA était auparavant comme un stagiaire : on lui demandait de rechercher des informations ou d'écrire du code, et il fallait le surveiller de près. Aujourd'hui, l'IA est devenue comme un directeur de projet expérimenté.

Anthropic utilise un cadre d'automatisation en six niveaux (AL0 à AL5). La situation actuelle est la suivante :

  • AL4 (IA dirigeante) : 26 % des travaux atteignent ce niveau. Qu'est-ce que cela signifie ? Les ingénieurs humains doivent simplement dire : « Réparez ce pipeline de données », et l'IA s'occupe du reste : vérification des journaux, recherche des causes, écriture du code, tests, et même rédaction de rapports. Les humains n'ont qu'à vérifier le résultat pour s'assurer qu'il est correct.
  • AL3 (collaboration avec l'IA) : Plus de 90 % des travaux atteignent au moins ce niveau. Cela signifie que, dans la plupart des cas, l'IA est profondément intégrée et constitue une force productive essentielle.

Interprétation simple : C'est comme si, auparavant, vous conduisiez et que l'IA vous indiquait simplement où tourner ; maintenant, l'IA pilote automatiquement, et vous êtes assis sur le siège passager, les mains sur le volant, mais c'est la voiture qui conduit. Bien que nous ne soyons pas encore à l'étape où « vous pouvez dormir pendant que la voiture conduit » (AL5), la charge de travail des humains a considérablement diminué. Ce bond de 1 % à 26 % en seulement six mois dépasse largement les attentes.

2. **30 000 « employés IA » qui travaillent dur en arrière-plan**

Ce qui est le plus surprenant dans cette révélation, ce n'est pas le pourcentage, mais l'échelle.

Anthropic dispose d'une plateforme d'agents IA qui fonctionne en permanence, avec environ 30 000 agents IA en activité à tout moment. Ces agents ne sont pas isolés ; ils ont des identités individuelles et s'organisent mutuellement pour assigner des tâches et corriger des erreurs grâce à un système de messagerie partagée. En août, ces IA ont pris plus de 1 milliard de décisions.

Interprétation simple : Imaginez que, dans les salles de serveurs d'Anthropic, en plus des ingénieurs humains, il y ait une équipe immense composée de 30 000 « employés numériques » qui travaillent 24 heures sur 24, se téléphonant (ou envoyant des messages) pour confirmer les tâches et vérifier si le code est correct.

Il ne s'agit plus d'un modèle où une seule personne utilise un assistant IA, mais d'une équipe d'IA qui dessert un processus de recherche et développement complet. Cet effet d'échelle signifie que l'efficacité de la recherche et du développement en IA augmente de manière exponentielle. Ce que l'équipe humaine mettait plusieurs mois à réaliser peut maintenant être fait en quelques jours ou même quelques heures grâce à la capacité de traitement parallèle de l'équipe d'IA.

3. Surveillance de la sécurité : 2000 infractions détectées sur 1 milliard d'opérations

Étant donné la capacité de l'IA, pourrait-elle mal utiliser ses pouvoirs ? Anthropic a fourni des données de sécurité très précises :

  • Surveillance en ligne : Sur les 1 milliard de décisions prises par l'IA en août, seulement environ 0,002 % ont été empêchées par le système. En d'autres termes, sur 1 milliard d'opérations, seulement environ 20 000 ont été interrompues.
  • Surveillance hors ligne : Chaque semaine, environ 100 000 enregistrements de conversation sont marqués ; après filtration des faux alarmes par les machines, seules environ 50, les plus prioritaires, nécessitent une vérification manuelle.

Interprétation simple : Ces données révèlent deux choses :

1. L'IA est très « bien élevée : La plupart du temps, l'IA agit selon des règles établies, et le taux d'infractions est très faible.

2. La surveillance est laborieuse : Bien que le taux d'infractions soit bas, le nombre d'opérations est élevé (1 milliard), donc le système doit surveiller en permanence. Ces 50 enregistrements nécessitant une vérification manuelle sont comme des patients en soins intensifs à l'hôpital : leur nombre est faible, mais chacun est crucial.

Cela montre également que le système de sécurité actuel repose principalement sur l'interception a posteriori et l'examen a posteriori, plutôt que sur la **prévention a priori*. L'IA peut essayer des actions à la limite des règles pendant son fonctionnement, et le système a pour mission de l'arrêter. C'est comme les caméras sur l'autoroute : elles peuvent détecter les excès de vitesse et imposer des amendes, mais elles ne peuvent pas empêcher les voitures de dépasser la vitesse elles-mêmes.

4 Allocation des ressources de calcul : 12 % des ressources de calcul sont consacrées à la sécurité

Un détail souvent négligé mais très important est l'allocation des ressources de calcul.

Pendant la semaine d'échantillonnage de juillet, Anthropic a consacré environ 6 % de ses ressources de calcul à la recherche en sécurité. Si l'on ne prend en compte que les travaux de recherche et développement menés par l'IA, ce pourcentage est passé à 12 %.

Interprétation simple : Les ressources de calcul sont l'énergie et le temps de l'IA. Le fait qu'Anthropic consacre 12 % de son temps de recherche et développement à la prévention des dommages causés par l'IA montre qu'ils sont très conscients du fait que, avec l'augmentation de l'autonomie de l'IA, les risques de sécurité augmentent également de manière exponentielle.

C'est comme une banque qui doit allouer davantage de budget à la sécurité pour se protéger des attaques de hackers ou des fraudes internes à mesure que les transactions automatisées augmentent. Ces 12 % de ressources de calcul servent de freins et de dispositifs de sécurité dans le processus d'itération de l'IA. Sans cet investissement, plus l'IA avance rapidement, plus le risque de catastrophe est élevé.

5. Stratégie industrielle : La transparence devient une nouvelle **arme**

Enfin, il faut sortir du cadre purement technique pour examiner la politique industrielle derrière cette révélation.

Anthropic a décidé de rendre ces données sensibles publiques pour deux raisons :

1. Gagner en influence : Avant que l'itération autonome de l'IA ne devienne complètement hors de contrôle, montrer au public et aux autorités de régulation que les humains ont encore le contrôle, afin d'obtenir plus d'espace politique et de temps de développement.

2. Exercer une pression sur la concurrence : C'est une sorte de course à la révélation. Lorsque Anthropic révèle ses données, des concurrents tels qu'OpenAI et Google DeepMind, s'ils continuent de cacher les leurs, seront questionnés par le public et les médias : « Cachez-vous des risques ? » ou « Êtes-vous en retard ? »

Interprétation simple : C'est comme la publication des rapports financiers sur le marché boursier. La première entreprise à publier des données détaillées gagne en crédibilité auprès des investisseurs. Maintenant, l'industrie de l'IA est entrée dans une phase de concurrence pour la transparence. Celui qui révèle le premier, et le plus en détail, occupera une position morale dominante et prendra l'initiative dans l'opinion publique.

Cela établit également une ligne de référence pour l'industrie. À l'avenir, lorsque l'on comparera la vitesse de développement de l'IA, on ne se contentera plus de comparer les scores des modèles, mais aussi des indicateurs techniques plus importants tels que le taux d'automatisation, la taille des équipes d'IA et le taux d'interception des violations de sécurité.

---

Conclusion et perspectives

La révélation d'Anthropic marque l'entrée de la recherche et du développement en IA dans une nouvelle phase « semi-automatique.

  • Bonnes nouvelles : L'IA peut effectivement améliorer considérablement l'efficacité de la recherche et du développement, permettant aux ingénieurs humains de se libérer des tâches de codage fastidieuses pour se concentrer sur la conception et l'innovation de plus haut niveau.
  • Mauvaises nouvelles/défis :
  • La décision reste entre les mains des humains : L'IA peut exécuter des tâches, mais elle ne peut pas fixer de buts stratégiques de manière autonome.
  • Manque de capacité de débogage à long terme : Pour les problèmes systémiques complexes et à long terme, l'IA manque encore de compréhension et de capacité de débogage réelles.
  • La surveillance de la sécurité est encore au stade initial : La surveillance actuelle est principalement basée sur l'interception des infractions en cours, plutôt que sur la prévision des risques.

Pour le grand public, cela signifie que les produits basés sur l'IA seront mis à jour plus rapidement et disposeront de fonctionnalités plus puissantes. Pour l'industrie, cependant, il s'agit d'une course pour le contrôle, la sécurité et la transparence. Anthropic a pris l'initiative ; les prochaines étapes seront encore plus intéressantes et tendues.