虎嗅

**Deutscher Titel:** Drei Schlussfolgerungen aus dem umfangreichen, viral gegangenen Artikel von Anthropic – sowie ein zu wachenderes Komplott

原文:Anthropic万字爆火长文的三个判断,以及一个值得警惕的阳谋

Zusammenfassung der Kerninhalte

Der Artikel „When AI builds itself“ von Anthropic zeigt anhand interner, echter Daten, wie künstliche Intelligenz (Claude) tiefgreifend in die eigene Entwicklung einbezogen wird: Heute werden 80 Prozent des Produktionscodes von Anthropic von Claude generiert, wodurch Ingenieure von „Code-Schreibern“ zu „Überwachern“ der Code-Prüfung geworden sind. Gleichzeitig deutet der Artikel darauf hin, dass sich die Iterationsgeschwindigkeit der KI immer weiter erhöht – doch der Titel könnte irreführen und den Eindruck erwecken, als könne sich die KI bereits selbst entwickeln. Dahinter stecken zwei wichtige Botschaften: Erstens beschleunigt sich die Entwicklung der KI tatsächlich, aber die Menschen behalten die entscheidenden Kontrollmöglichkeiten; zweitens ruft Anthropic kurz vor einer Finanzierung und Markteinführung nach Regulierungen, möglicherweise um ihren führenden Vorsprung zu sichern.

1. Ingenieure von „Code-Schreibern“ zu „Überwachern“: Die Bedeutung der Ausführungskraft nimmt ab

80 Prozent des Codes bei Anthropic werden heute von Claude erstellt, und die tägliche Code-Einreichmenge der Ingenieure hat sich im Vergleich zum Vorjahr um das Achtfache erhöht (auch wenn die Anzahl der Zeilen nicht unbedingt auf die Qualität schließen lässt, ist die Logik nach Prüfung in Ordnung). Das bedeutet, dass sich die Arbeitsweise der Programmierer grundlegend verändert hat: Früher schrieben sie den Code selbst, testeten ihn und reichten ihn ein; heute geben sie der KI Ziele vor, die KI erstellt den Code, führt Tests durch und behebt Fehler – die Menschen überprüfen nur noch, ob die Richtung stimmt und ob es Probleme gibt.

Um es zu veranschaulichen: Früher musste der Regisseur das Filmmaterial selbst aufnehmen und bearbeiten; heute hat er vor sich zehn KI-Teams und sagt ihnen nur, welche Szenen aufgenommen werden sollen, wo etwas nicht in Ordnung ist oder wann sie anhalten sollen. Der Wert der Menschen liegt nicht mehr darin, Code zu schreiben, sondern darin zu wissen, was zu tun ist und wie man richtig entscheidet. Ähnlich wie bei der Verbreitung von Handykameras entscheidet nicht die Technik des Auslösers über die Qualität eines Fotos, sondern die Wahl des Winkels und des Motivs.

Fazit: Die Bedeutung der Ausführungskraft nimmt ab – „Urteilsfähigkeit“ wird zur zentralen Kernkompetenz der Zukunft.

2. Neues Hindernis: Können Sie die Ergebnisse der KI überprüfen?

Künstliche Intelligenz kann große Mengen an Code, Lösungen und Experimenten erzeugen – doch die Überprüfung durch Menschen wird zu einem neuen Problem. Anthropic nutzt KI, um den Code von KI zu prüfen, und kann so ein Drittel der Online-Fehler frühzeitig erkennen. Allerdings besteht hier ein Risiko: Wenn Claude den Code selbst überprüft, könnte es vorkommen, dass sie bei ähnlichen Fehlern „blind“ sind (wie Schüler, die von demselben Lehrer unterrichtet werden).

Noch wichtiger ist die Frage: Wenn die KI etwas richtig macht – wissen Sie, warum? Zum Beispiel kann eine von der KI entwickelte Funktion zwar ordnungsgemäß funktionieren, aber Sie sind sich nicht sicher, ob ihre Logik versteckte Risiken birgt. Die zukünftige Herausforderung für Teams besteht nicht darin, keine Lösungen zu haben, sondern darin, aus 100 KI-Vorschlägen herauszufinden, welche wirklich brauchbar sind und welche nur scheinbar richtig erscheinen, aber in Wirklichkeit fehlerhaft sind.

Fazit: Die Zukunft wird davon abhängen, ob man in der Lage ist, die Ergebnisse der KI zu überprüfen – die richtigen Lösungen auszuwählen, versteckte Fehler zu erkennen und zu wissen, wann man anhalten muss.

3. Die KI entwickelt sich zu schnell – Menschen können nicht mithalten

Der Artikel gibt an, dass die Zeit, die eine KI benötigt, um lange Aufgaben selbstständig zu erledigen, sich verdoppelt hat (von 7 Monaten auf 4 Monate). Im März 2024 konnte sie nur Aufgaben mit einer Dauer von 4 Minuten bearbeiten; im März 2025 bereits Aufgaben, die 1,5 Stunden dauerten, und im März 2026 Aufgaben, die 12 Stunden in Anspruch nahmen. Auch wenn die Erfolgsrate nur bei 50 Prozent liegt (und man der KI noch nicht voll vertrauen kann), ist der Trend deutlich: Die Iterationsgeschwindigkeit der KI nimmt weiter zu – sie könnte sogar dazu beitragen, die nächste Generation von KI zu entwickeln, wobei sie nicht mehr durch die Anzahl der Menschen, sondern nur durch Rechenleistung und Chips begrenzt wird.

Das Problem ist jedoch, dass es einen großen Unterschied zwischen der „Maschinengeschwindigkeit“ der KI und der „Geschwindigkeit der menschlichen Gesellschaft“ gibt. Zum Beispiel kann eine KI schnell neue Medikamente entwickeln, aber die Zulassung dieser Medikamente dauert Jahrzehnte (da Nebenwirkungen überprüft werden müssen); eine KI kann Code schnell ändern, aber die Gewöhnung der Nutzer muss langsam etabliert werden. Solche „langsamen Variablen“ (Gesetze, Bildung, Verhaltensweisen der Nutzer) können von der KI nicht ersetzt werden – das ist die echte Sorge für die meisten Menschen: Es geht nicht darum, dass ihre Jobs verloren gehen, sondern darum, dass sich die gesellschaftlichen Regeln nicht schnell genug an die technischen Entwicklungen anpassen.

Fazit: Wenn Ihre Arbeit solche „langsamen Variablen“ beinhaltet (z. B. das Verständnis der Nutzer, die Optimierung von Prozessen oder das Aufbauen von Vertrauen), ist das Ihr Sicherheitsnetz.

4. Der Titel ist eine „Rauchgranate“: Die KI kann sich noch nicht selbst entwickeln

Der Titel des Artikels „When AI builds itself“ ist beeindruckend – doch die Realität ist, dass KI derzeit nur bei der Entwicklung von Menschen unterstützt, nicht selbstständig neue Funktionen entwickelt. Wahre Selbstentwicklung würde darin bestehen, dass die KI ihre eigenen Schwächen erkennen, Lösungen vorschlagen und sich selbst trainieren könnte – doch Anthropic räumt ein, dass dieser Punkt noch nicht erreicht ist.

Ein Beispiel: Die Entstehung der Transformer-Architektur erfolgte durch zufällige Gespräche von Google-Entwicklern in einem Flur, die vom Großmeister Szarez mitgehört wurden; erst seine aktive Beteiligung führte zu einer Durchbruchslösung. In diesem Prozess waren menschliche Interaktionen und Entscheidungen entscheidend – der Code war nur das Ergebnis. Dass 80 Prozent des Codes von Anthropic von KI generiert werden, bedeutet nicht, dass 80 Prozent der Entwicklung von KI erledigt werden; die Auswahl der zu behandelnden Probleme, die Bewertung der Ergebnisse und die Entscheidung, wann aufzuhören, liegen weiterhin in den Händen der Menschen.

Fazit: Lassen Sie sich nicht vom Titel täuschen – KI ist derzeit ein „Superassistent“, kein „autonomer Entscheidungsträger“.

5. Der Appell nach Regulierungen: Ein „offener Plan“, um den Vorsprung zu sichern

Am Ende des Artikels wird der Aufruf nach einem „überprüfbaren Mechanismus zur Aussetzung der KI-Entwicklung“ gemacht, was verantwortungsvoll erscheint. Dahinter verbirgt sich jedoch eine zeitliche Strategie: Anthropic hat gerade eine Finanzierung in Höhe von 650 Millionen US-Dollar erhalten und wird mit einem Wert von fast einer Billion bewertet; außerdem wurde ein geheimer IPO-Antrag gestellt. Der Appell erfolgt möglicherweise, um ihren führenden Vorsprung zu sichern – nur große Unternehmen können die Kosten für Regulierungen tragen (z. B. Überprüfungsmechanismen, Compliance-Prozesse), während kleine Unternehmen dies nicht leisten können.

Dies erinnert an den „Baruch-Plan“ von 1946: Die USA forderten damals die Einrichtung eines internationalen Kontrollsystems, bevor sie Atomwaffen vernichteten – im Grunde genommen, um ihren eigenen Vorsprung zu wahren. Anthropics Vorgehensweise ist ähnlich: Wenn jetzt eine Aussetzung der Entwicklung erfolgt, können sie ihren Vorsprung behalten und es neuen Unternehmen erschweren, aufzuschließen.

Fazit: Wenn ein Unternehmen kurz vor einer Finanzierung und Markteinführung nach Regulierungen ruft, sollten Sie darüber nachdenken, „wem das nützt“.

Abschlussempfehlungen für die Lektüre des Artikels:

1. Glauben Sie an den Trend: Die Entwicklung der KI beschleunigt sich tatsächlich – die Arbeitsweise der Ingenieure wird sich ändern.

2. Betrachten Sie die Daten vorsichtig: Anthropics interne Daten (der Code, der von Claude erstellt wurde) repräsentieren nicht die gesamte Branche.

3. Glauben Sie nicht an „Selbstentwicklung“: Das ist eine narrative Darstellung, keine Realität.

4. Seien Sie wachsam vor „moralischen Höhen“: Der Appell nach Regulierungen könnte kommerzielle Zwecke verfolgen.

Kurz gesagt: KI ist ein Werkzeug – aber die Strategien der Menschen und Unternehmen dahinter sind es, die wirklich wichtig sind.

Quellenlink: https://www.anthropic.com/institute/recursive-self-improvement