虎嗅

Anthropic-Forscher tritt zurück – in 4 Tagen warnten 7 führende AI-Experten: Könnte KI die Menschheit auslöschen?

原文:Anthropic研究员辞职刷屏,4天7位AI大牛警告,AI或灭绝人类?

Zusammenfassung der Kerninhalte

In der globalen AI-Szene ist kürzlich ein großes Ereignis mit über hundert Millionen Aufrufen stattgefunden: In den letzten vier Tagen haben sieben führende Forscher von drei der weltweit renommiertesten AI-Unternehmen – OpenAI, Anthropic und Google DeepMind – öffentlich erklärt, dass die derzeit mit aller Kraft entwickelten, selbst-updatierbaren Super-AI-Systeme voraussichtlich bis 2030 in der Lage sein könnten, die Existenz der Menschheit zu bedrohen oder sogar zum Aussterben der Menschheit zu führen. Coxon, ein Forscher von Anthropic, der die Führung übernommen hat, gab sogar auf große Unternehmensanteile verzichtet, die er in zwei Monaten hätte erhalten können, um die Wahrheit zu sagen – das entspricht dem Verlust von Millionen an Einnahmen – und entlastete sich damit von dem Vorwurf, den Aktienkurs des Unternehmens zu manipulieren, um mehr Traffic zu generieren. Diese Aussagen sind keine gewöhnlichen Branchenklatschgeschichten, sondern zeigen eine seit langer Zeit bestehende Problematik in der AI-Szene: Die Menschen, die AI am besten verstehen, fürchten täglich, dass ihre Erfindungen die Menschheit zerstören könnten, können aber ihre Forschung nicht einstellen. Hinter dieser Situation steckt ein großes Problem im Anreizsystem der gesamten Branche. Für alle Normalbürger bedeutet dies, dass es an der Zeit ist, selbst Einfluss auf die Entwicklung von AI zu nehmen, anstatt zwischen den Extremen der „AI-Verherrlichung“ und der „AI-Apokalypse“ hin- und herzuschwanken.

---

Detaillierte Analyse

1. Diese AI-Warnung ist definitiv keine übliche Marketingstrategie

Früher reagierten viele Menschen auf Behauptungen von AI-Unternehmen, dass ihre Technologie gefährlich sei, mit einer Art „Umkehr-Blasphemie“: „Seht her, unsere Technologie ist so mächtig, dass sie die Welt zerstören kann – kauft schnell unsere Dienstleistungen oder investiert in unsere Aktien!“ Dieses Mal ist die Situation jedoch völlig anders:

  • Coxon, der die Informationen öffentlich machte, verzichtete bewusst auf große finanzielle Vorteile; er hatte also keinen Anreiz, den Aktienkurs des Unternehmens zu manipulieren.
  • Unter den sieben Sprechern befinden sich auch Personen, die für die Sicherheit von AI-Systemen verantwortlich sind – das bedeutet, dass Fachleute, die eigentlich dafür da sind, eine Kontrolle über das Unkontrollierte zu gewährleisten, selbst warnen.
  • Der alte Witz aus dem Silicon Valley, dass AI-Fachleute nach dem Ausscheiden aus dem Beruf Gedichte schreiben, um Zeit mit ihrer Familie zu verbringen, spiegelt nun die wachsende Panik in der Branche wider.

2. Die absurdeste Branchenparadoxie: Diejenigen, die eine AI-Apokalypse fürchten, treiben die Entwicklung von AI sogar voran

Viele Menschen sind verblüfft, wenn sie die Nachrichten lesen: Warum hören diese Menschen nicht einfach auf zu arbeiten, wenn sie wissen, dass AI die Menschheit zerstören könnte? Tatsächlich steckt die ganze Branche in einem „beschleunigten Teufelskreis“: Wenn die führenden AI-Unternehmen aufhören zu entwickeln, könnten kleinere, weniger verantwortungsbewusste Unternehmen oder böswillige Akteure Super-AI-Systeme entwickeln, was noch gefährlicher wäre. Deshalb müssen sie schneller sein als alle anderen – nur so können sie die Sicherheit gewährleisten.

Das Ergebnis ist, dass alle Unternehmen behaupten, sie würden die Entwicklung beschleunigen, um die Menschheit zu schützen. Doch in Wirklichkeit führt dies nur dazu, dass die Geschwindigkeit der Entwicklung weiter zunimmt, und niemand wagt es, die Bremse zu ziehen. Die Konsequenzen tragen letztendlich alle Menschen – doch die Unternehmen profitieren davon.

3. Lassen Sie sich nicht von der „Apokalypsen-Darstellung“ manipulieren: Die aktuellen Schäden durch AI sind realer als die mögliche Zerstörung der Menschheit in zehn Jahren

Viele Menschen sind entweder so verängstigt, dass sie nicht schlafen können, oder sie halten diese Behauptungen für übertrieben. Doch die aktuellen Probleme durch AI – wie AI-Betrug, die Verluste vieler Menschen bei Jobgesprächen oder die Macht einiger Unternehmen über die Daten der Nutzer – sind viel realer. Wenn die Öffentlichkeit sich nur auf die mögliche Zukunft konzentriert, übersehen sie diese Probleme.

4. Wir Normalbürger müssen keine Partei ergreifen – drei wichtige Rechte sollten genügen

Die öffentliche Meinung neigt dazu, Menschen in Extreme zu drängen: Entweder halten wir die Sprecher für Betrüger, die den Aktienkurs in die Höhe treiben wollen, oder wir glauben, dass die Welt bald untergehen wird und sollten uns einfach passiv verhalten. Doch das ist nicht notwendig. Laut einer Umfrage unter über 2700 führenden AI-Forschern glauben 38%, dass die Wahrscheinlichkeit eines AI-Verderbens der Menschheit mindestens 10% beträgt, und 70% sind der Meinung, dass die Investitionen in die Sicherheit von AI nicht ausreichen. Es handelt sich dabei jedoch nicht um die Fantasien einiger Verrückter – es gibt keine Beweise dafür, dass eine AI-Apokalypse unweigerlich eintreten wird.

Wir Normalbürger müssen uns nicht mit komplexen Technologien beschäftigen. Wir sollten drei Dinge klar fordern:

1. Wenn AI-Unternehmen neue, besonders leistungsstarke Modelle entwickeln, dürfen sie diese nicht einfach so auf den Markt bringen; es müssen unabhängige Institutionen überprüfen, ob diese Modelle sicher sind.

2. Wenn Mitarbeiter innerhalb der Unternehmen Sicherheitsprobleme entdecken, dürfen sie diese nicht durch Geheimhaltungsabkommen unterdrückt werden; es müssen sichere, anonyme Meldemöglichkeiten geben.

3. Wenn AI tatsächlich Schäden verursacht, dürfen die normalen Menschen nicht die Konsequenzen tragen; die Unternehmen müssen die volle Verantwortung übernehmen.

Schließlich hat niemand das Recht, das Schicksal der Menschheit auf das eigene Geschäftsergebnis zu setzen – auch wenn die Unternehmen behaupten, sie würden die Menschheit schützen.