虎嗅

かつて必死に加速していたAIの巨頭たちが、ついにAIを恐れ始めた

原文:曾经拼命加速的AI巨头,终于开始怕AI了

AI巨頭たちが「ブレーキをかける」:生死、金銭、そして権力の駆け引き

こんにちは、私はあなた方の財経ジャーナリストです。今日お話しするのは、単なる退屈な技術報告書ではなく、シリコンバレー、ワシントン、ウォールストリートの間で激しく繰り広げられている「大きな駆け引き」です。

最近、「AIが人類を滅ぼすかもしれない」とか「AI企業はスピードを落とすべきだ」といったニュースを見かけた方もいるかもしれませんが、急いでスクロールしないでください。これは単なるギークたちの杞憂ではなく、世界中のトップクラスのテクノロジー企業、政治家、資本家たちが「AIをどのように進化させるべきか」で激しく対立しているのです。

簡単に言うと、**以前は誰が最も速く進むかを競っていましたが、今は「ブレーキをかけるべきだ」という声が上がり始めています。しかし、まだスピードを上げたいと思う人もいれば、レースのコースを変えたいと思う人もいます。これには人類の運命、何兆ドルもの市場価値、そして大国間の駆け引きが関わっています。

では、この駆け引きがどのように進んでいるのか、わかりやすく説明しましょう。

---

一、きっかけ:若者の「辞職声明」がネットを騒がせた

話は9月8日に遡ります。Jacob Coxonという27歳の若者が、AIの安全性を専門とする企業Anthropicを辞職しました。

プログラマーの転職はよくあることですが、Jacobは違いました。彼は「AIは10年以内に私たち全員を殺すかもしれない」という衝撃的な発言をしました。

この発言は爆弾のように、1億7000万回もの閲覧数を記録しました。なぜこれほど大きな反響があったのでしょうか?それはJacobがただの従業員ではなく、OpenAIやAnthropicで働いており、AIの核心に最も近い人物だったからです。彼はこれらの企業が「無責任な競争」を行い、人類の命を賭けていると非難しました。

続いて、別の元Anthropicの従業員も「私たちはこの危機を乗り越えられないかもしれない」と発言しました。つまり、現在のAIは人間よりもはるかに賢くなっており、それが常に人間の言うことを聞くとは限らないというのです。

さらに衝撃的なのは、Anthropicのセキュリティ責任者が公に「今後10年以内にAIが人類を全滅させる可能性は10%を超える」と認めたことです。これはどういう意味でしょうか?ロシアのルーレットで6発の弾丸のうち1発が本物の弾丸である確率は16.7%です。つまり、専門家たちにとって、AIが制御を失うリスクは非常に高いとされているのです。

重要なポイント: これはSF映画の話ではなく、最強のAIモデルを持つ人々が「私たちはもはやそれをコントロールできないかもしれない」と公に認めているのです。

---

二、シリコンバレーの「ブレーキ」:巨頭たちが突然スピードを落とそうとする

このパニックに直面し、AnthropicのCEOであるDario Amodeiは動き出しました。9月12日に彼は「私たちは最先端のAIにブレーキをかけなければならない」というタイトルの長文を発表しました。

Darioは最も懸念している3つの問題を挙げました:

1. 制御不能: 人類がAIを完全にコントロールできなくなる。

2. 悪用: AIが大規模なサイバー攻撃や生物テロに利用される。

3. 衝撃: 技術の進歩が速すぎて、仕事や経済が崩壊する。

ブレーキをかけるために、彼はいくつかの提案をしました。それはまるで「AIに監視を設ける」ようなものです:

  • 外部の監査を受け入れる: 独立した第三者機関にAIラボに常駐してもらい、規則違反がないかを常にチェックしてもらう。
  • ルールを定める: 大手企業が政府の参加のもとで共通のセキュリティ基準を設ける。規則を破った企業は活動を停止しなければならない。
  • 世界的な統一: アメリカだけでなく、他の民主主義国家も協力し、同じ基準を守る必要がある。

これに対し、OpenAIのCEOであるSam AltmanやGoogleのDemis Hassabisも支持の声を上げました。Sam Altmanは、AIが特定の個人、企業、国家によって独占され、ある種の世界観を強制されるとしたらそれは「反ユートピア」になると述べました。

しかし、ここに大きな矛盾があります:

皆が「安全」を求めているにもかかわらず、誰が基準を定めるのか?

  • Dario(Anthropic): 政府の深い関与を望んでおり、政府には安全でないモデルを停止する権限があるべきだと考えています。
  • Hassabis(Google): 金融業界のような自主規制機関を設立し、業界が自らを管理し、政府は監督するだけでよいと考えています。
  • Altman(OpenAI): より現実的なアプローチを取り、政府がうまく機能しない場合は、大手企業が自ら基準を設けるべきだとしています。

つまり、 規則を定める権力を持つ者が、業界の命運を握るということです。初期の規則を定めた者は、自社の技術的優位性を「業界標準」として後続の企業に課すことができます。これは安全問題だけでなく、市場へのアクセス権の争いでもあります。

---

三、ワシントンの「アクセル」:政治と選挙の計算

シリコンバレーが「スピードを落とせ」と叫んでいる一方で、ワシントン(アメリカ政府)は「スピードを上げろ」と主張しています。

9月13日、トランプはこの論争に公にコメントしました。彼の態度は明確でした:**「AIで勝つ者が勝つのだ。」

トランプにとって、AIは倫理を議論するためのものではなく、中国に勝つためのものです。彼は現在アメリカがリードしていると考えており、リスクを恐れてブレーキをかけることは優位性を手放すことになるとしています。AIのリスクを警告する人々を「非常に否定的な力」と呼び、決して起こらない災害を煽っていると非難しました。

トランプがこれほど急いでいる理由は何でしょうか?

1. 中間選挙の圧力: 2026年9月の中間選挙まであと2ヶ月余りです。AIは熱い話題です。

2. 有権者の感情: 一方で、「MAGA(アメリカを再び偉大にする」支持者はAIが仕事を奪い、エネルギーを消費することを懸念しています。一方で、トランプはAIが中国に遅れをとると「アメリカの強さ」への信頼を失うと恐れています。

そのため、トランプは「中国との競争」を選びました。彼にとって、中国がまだ競争している限り、アメリカは止まるわけにはいきません。AIにリスクがあっても、相手に負けるよりはましだと考えています。

これがジレンマを生んでいます:

  • シリコンバレー(テクノロジーシーン): 制御不能を恐れ、スピードを落とし、世界的な規制を設けたい。
  • ワシントン(政治シーン): 遅れを恐れ、スピードを上げ、中国に対する優位性を保ちたい。
  • 結果: 政策は揺れ動き、規制したいと思いながらも、規制が競争力に影響を与えることを恐れています。

---

四、ウォールストリートの「心拍数」:評価バブルと資本の駆け引き

シリコンバレーが「スピードを落とせ」と言っている一方で、ウォールストリートは「お金」を気にしています。

過去数年間、AI企業の評価が急騰したのは、次のような考えが広まっていたからです:モデルが強くなる → ユーザーが増える → 収入が増える → データセンターやGPUの投資を続ける。

しかし、今、いくつかのCEOが「スピードを落とすかもしれない」と公に発言しました。ウォールストリートの反応は非常に迅速でした:

  • 株価の急落: 関連するAI株が一時的に13%下落しました。
  • 再評価: AIが無限に加速できなければ、これまでの計算はすべて見直さなければなりません。データセンターをこれ以上建設する必要があるのでしょうか?GPUをこれ以上購入する必要があるのでしょうか?

皮肉なことに:

  • OpenAI: IPO(上場)を延期することを決定しました。Sam Altmanは、セキュリティ問題が解決するまで上場を遅らせると示唆しました。
  • Anthropic: しかし、ナスダックへの上場を加速し、目標評価額は2兆ドルに達し、NVIDIAからは100億ドルの投資を受ける予定です。

なぜDarioは「業界はスピードを落とすべきだ」と言いながら、自社の上場を加速させるのでしょうか?

それは規制自体が防御壁になるからです。

もし将来AIが厳しく規制されるならば:

1. コンプライアンスコストが高くなり、小規模企業は参入できなくなります。

2. Anthropic、OpenAI、Googleのような巨頭だけが、複雑なセキュリティ基準を満たすための資金とチームを持っています。

3. ハードルが高ければ高いほど、巨頭は安全です。 すでにトップに立っている企業にとって、高い壁は障害ではなく、保護の盾になります。

つまり、ウォールストリートが見ているのは「スピードの落とし」ではなく、「業界の再編」です。セキュリティ能力のない小規模企業は淘汰され、残った巨頭がより大きな市場シェアを手に入れるでしょう。

---

五、歴史の教訓:私たちは本当にそれをコントロールできるのか?

最後に、この論争から一歩引いて、より深い問題を考えてみましょう。

Jacob Coxonの発言が広まったのは、それが潜在的な不安に触れたからです。10年前にはEthereumの創設者Vitalik Buterinも同様の警告をしていましたが、当時は単なる思想実験とされていました。しかし今、これらの言葉はCEOの声明や政府の議題に登場しています。

これは1939年にアインシュタインがルーズベルト大統領に送った手紙を思い起こさせます。当時、アインシュタインはドイツが原子爆弾を開発する可能性があると警告し、アメリカは対応しなければならないと述べました。アインシュタインは後にその手紙に署名したことを後悔しました。なぜなら、原子爆弾の恐ろしさを知っていたからです。

現在の状況も当時と同じです:

  • この技術が危険であることを知っている。
  • しかし、相手(中国や他国)も必死に研究を進めている。
  • もし止まれば負けるかもしれない。しかし、止まらなければ滅びるかもしれない。

これがいわゆる「安全のジレンマ」です。皆がブレーキを話していますが、目は隣の車がアクセルを離しているかどうかに向けられています。

まとめると:

この騒動の表面はAIの安全性ですが、実際には権力、資本、地政学の三重の駆け引きです。

  • **一般の人々にとっては、AIの発展が遅くなるかもしれませんが、より「規制される」ことになるでしょう。
  • 投資家にとっては、AI業界の高成長の神話が挑戦に直面するかもしれません。
  • 人類全体にとっては、 安全のために速度を犠牲にするか、速度のために安全を賭けるかという選択に直面しています。

現時点では、絶対的な答えはありません。しかし確かなのは、AIはもはや誰もが簡単に参入できるものではないということです。これから数ヶ月間、規制がどのように実施されるか、巨頭たちが「お金を稼ぐ」と「命を守る」の間でどのようにバランスを取るかが見えてくるでしょう。

これは単なる技術ニュースではなく、私たちの未来の生活様式に関わる政治的、経済的な大問題です。引き続き注目してください。