虎嗅

„Gemini 3.8 Flash“ ist da – doch das Ergebnis wurde von den Konkurrenten spöttisch kommentiert.

原文:Gemini 3.8 Flash 来了,结果惨遭对手嘲讽

Zusammenfassung der Kerninhalte

Google aktualisiert sein Gemini Flash-Modell alle drei Wochen (die Version 3.8 wurde erst vor drei Wochen veröffentlicht, was nur drei Wochen seit der vorherigen Version ist), und hat außerdem die speziell für die Netzwerk Sicherheit entwickelte Cyber-Version auf den Markt gebracht. Meta hat ebenfalls sein Modell aktualisiert und dabei Google verspottet mit der Frage „Wer ist Gemini?“ Der Flaggschiff-Modell-Serie von Google, die Gemini Pro, geht es nicht gut (die Version 3.5 Pro wurde abgesagt, die Version 4 befindet sich noch in der Trainingsphase), wodurch das kleinere Flash zum Hauptmodell werden musste. Der Grund dafür liegt in der veränderten Logik der Entwicklung großer Modelle: Früher wurde auf die Größe der Modelle gesetzt, heute wird mehr Wert auf Nachtrainingsverfahren wie das Deep Reinforcement Learning und Agenten gelegt. Da Flash kleiner ist und die Kosten für Fehlerbehebung geringer sind, kann es diese neuen Fähigkeiten schnell iterativ verbessern.

1. Warum aktualisiert Google Flash alle drei Wochen? Kleine Modelle werden zum „schnellen Testfeld“

Früher wurden große Modelle nur langsam aktualisiert, weil sie sehr umfangreich waren – eine Änderung erforderte viel Rechenleistung, Zeit und interne Abstimmung zwischen verschiedenen Teams, was die Kosten für Fehlerbehebung in die Höhe trieb. Flash hingegen ist kleiner, die Kosten für Anpassungen und Neutrainings sind daher gering, und mehrere Teams innerhalb von Google können gleichzeitig verschiedene Technologien wie Deep Reinforcement Learning oder Agententraining ausprobieren.

Zum Beispiel ist Flash wie das „Testsystem“ auf einem Smartphone: Es kann schnell neue Funktionen hinzufügen und Fehler beheben, während die Pro-Serie als „offizielle Flaggschiff-Version“ nur dann aktualisiert wird, wenn die Funktionen ausgereift genug sind. Jetzt werden neue Fähigkeiten wie Deep Reinforcement Learning und Werkzeugaufrufe zunächst auf Flash getestet, und wenn sie sich als effektiv erweisen, werden sie sofort weiterentwickelt – daher erscheint jede drei Wochen eine neue Version.

2. Was macht die Version 3.8 von Flash so stark? Sie handelt fast wie ein „engagierter Mitarbeiter, der die Arbeit selbst erledigt“

Frühere AI-Modelle lieferten bei komplexen Aufgaben oft nur eine vorläufige Antwort, ohne Rücksicht darauf, ob sie funktionierten oder Fehler enthielten. Die Version 3.8 verfügt über die Fähigkeit der „Agentic Loops“ – sie überlegt zunächst, wie die Aufgabe zu erledigen, ruft die entsprechenden Werkzeuge auf, überprüft die Ergebnisse, korrigiert Fehler und setzt die Arbeit fort, bis die Aufgabe abgeschlossen ist.

In der offiziellen Demo kann das Modell auf Basis einer einfachen Anweisung selbst ein spielbares 3D-Zaubererspiel erstellen, einschließlich Rätseln und Texturmaterialien, oder sogar eine DOS-Version von Google Maps mit Straßenszenen. Die Testergebnisse sind beeindruckend: In Langzeittests für Softwareentwicklung übertrifft es viele große Modelle, und in Finanz- und Rechtsbereichen hat es sich deutlich verbessert; bei Tests zu STEM-Kenntnissen erzielte es 54,9 % der Punkte. Google möchte, dass Flash nicht mehr als „billig und schnell, aber schwach“ wahrgenommen wird, sondern in der Lage ist, komplexe Aufgaben zu bewältigen.

3. Schnell – aber fehlen die Details? Vor- und Nachteile sind deutlich

Die Vorteile von Flash sind seine Geschwindigkeit und geringen Kosten:

  • Im Vergleich zu Claude Opus 5 kostet die Erstellung derselben Three.js-Szene mit Flash nur 0,12 US-Dollar (Opus kostet 1,86 US-Dollar, das ist 15-mal so teuer) und die Geschwindigkeit ist um das Siebenfache geringer (37 Sekunden gegenüber 24 Minuten).

Allerdings gibt es auch Nachteile:

  • Beim Spielen des „Sticky Ball“-Spiels ist die Erstellung zwar schnell, aber das Erlebnis ist nicht so gut wie bei Kimi K3 (es gibt Unterschiede in der Bewegungsmechanik und dem Design);
  • Bei der Erstellung einer Szene des New Yorker Marktes platzierte Flash nur 6 Bäume (Opus hingegen 1840 Bäume), vergaß die von den Nutzern gewünschten Fußgängerüberwege und Unterwassereffekte und fügte zusätzlich unerwünschte Kamerapresets sowie eine Echtzeituhr hinzu.

Insgesamt eignet sich Flash gut für die schnelle Erledigung von Aufgaben, aber die Genauigkeit und die Endqualität sind noch nicht auf dem Niveau der Flaggschiff-Modelle.

4. Warum ist Flash zum „Notfallteam“ geworden, obwohl die Pro-Serie Schwierigkeiten hat?

Die Entwicklung der Flaggschiff-Serie Gemini Pro verläuft derzeit nicht gut:

  • Die ursprünglich geplante Version 3.5 Pro wurde abgesagt, da die Verbesserungen im Vergleich zu Flash nicht signifikant waren;
  • Die Version 4 befindet sich noch in der Trainingsphase und wird erst in Zukunft veröffentlicht.

Der Grund für die Schwierigkeiten mit der Pro-Serie liegt darin, dass es sich um ein großes Modell handelt, das bei jeder Aktualisierung viel Rechenleistung und Ressourcen erfordert – eine qualitativ signifikante Verbesserung ist notwendig, bevor es sich lohnt. Flash hingegen kann schnell neue Fähigkeiten entwickeln und füllt somit die Lücke, die die Pro-Serie hinterlässt. Zudem hat Google die Entwicklungsrichtung angepasst (die Führung fordert eine Beschleunigung), wodurch Flash nun die Hauptrolle übernehmen musste – es ist sowohl für die Kosten als auch für die Geschwindigkeit verantwortlich und übernimmt außerdem die Aufgaben, die früher von der Pro-Serie erledigt wurden.

5. Was ist die Cyber-Version? Ein „Sicherheitsexperte“ zur Fehlererkennung

Zusätzlich wurde die Version 3.8 Flash Cyber veröffentlicht, die speziell für Netzwerk Sicherheitsaufgaben entwickelt wurde:

  • Sie kann Sicherheitslücken erkennen, Penetrationstests durchführen und automatisch Sicherheitspatches erstellen;
  • Die Testergebnisse zeigen, dass sie bei der Lückenerkennung besser abschneidet als die vorherige Version und viele andere große Modelle;
  • Die Effektivität in der Praxis ist beeindruckend: Das Chrome-Team nutzte sie, um korrekte Patches zu erstellen – die Effizienz war 2,6-mal höher als bei kommerziellen Modellen; das Sicherheitsunternehmen Wiz verbesserte die Fehlerbekämpfung um 7,5–9,7 % und senkte die Kosten um 2,3–5,2 Mal; sogar schwere Lücken, die mit herkömmlichen Methoden erst nach Monaten gefunden werden könnten, wurden in weniger als zwei Stunden entdeckt.

Diese Version dient überprüften Netzwerkverteidigern und stellt somit einen „effizienten und kostengünstigen Assistenten“ für Sicherheitsmitarbeiter dar.

Fazit: Eine „kurvenreiche Rettungsstrategie“ von Google?

Ursprünglich plante Google wahrscheinlich nicht, dass Flash zum Hauptmodell wird, aber die Schwierigkeiten mit der Pro-Serie sowie die veränderte Logik der großen-Modell-Entwicklung (wichtiger werden nun Nachtrainingsverfahren) haben dazu geführt, dass Flash plötzlich sehr gefragt ist. Allerdings ist dies nur eine vorübergehende Lösung – letztendlich hängt alles davon ab, ob die Version 4 von Gemini erfolgreich sein wird. Andernfalls kann Flash zwar schnell arbeiten, aber sie wird die Lücke der Flaggschiff-Modelle nicht dauerhaft schließen können. Meta’s Spott („Wer ist Gemini?“) zeigt außerdem, dass Google in der Entwicklung seiner Flaggschiff-Modelle ins Hintertreffen geraten ist.