Die US-Regierung hat Chinas neuestes KI-Modell auf seine Sicherheit getestet. Sie fand heraus, dass Kimi K3 von Moonshot AI nicht mit den besten US-Modellen mithalten kann.
Das Center for AI Standards and Innovation (CAISI), eine US-Behörde, führte die Tests mit einer britischen Partnerorganisation durch. Die Ergebnisse wurden veröffentlicht, nur einen Tag nachdem Washington Moonshot beschuldigt hatte, Kimi K3 mit gestohlener US-Technologie gebaut zu haben.
Kimi K3 bleibt hinter US-Cyber-Standards zurück
Das Handelsministerium veröffentlichte die Ergebnisse am Donnerstag. Es erklärte, dass Kimi K3 deutlich schwächer abschneidet als die führenden US-Modelle. Grundlage war ein gemeinsamer Test mit britischen Experten.
Moonshot stellte Kimi K3 am 16. Juli vor. Die Nachfrage war so hoch, dass Moonshot neue Anmeldungen bereits nach zwei Tagen zeitweise stoppte.
Der Start beeinflusste auch US-Chip-Aktien und brachte neue Zweifel an der US-Führungsrolle im Bereich KI auf.
Ein Test mit dem Namen ExploitBench arbeitete mit echten Schwachstellen aus dem Chrome-Browser, entwickelt von der Carnegie Mellon University. Kimi K3 erreichte 32%, besser als das chinesische Modell GLM-5.2 mit 24%. Die besten US-Modelle kamen aber auf rund 76%.
Die schwerste Aufgabe besteht darin, die volle Kontrolle über einen Ziel-Rechner zu erlangen. Kimi K3 scheiterte an allen 41 Versuchen. Die besten US-Modelle schafften es 20 Mal.
Bei einem weiteren Test, genannt The Last Ones, handelt es sich um einen simulierten Angriff auf das Netzwerk eines fiktiven Unternehmens mit 32 Schritten. Ein menschlicher Experte benötigt dafür etwa 20 Stunden. Kimi K3 erreichte im Durchschnitt Schritt 17, die besten US-Modelle kamen auf 28,5. Kimi K3 durchlief alle Schritte einmal bei zehn Testläufen.
Die besten US-Systeme meisterten den Test Berichten zufolge sechs oder sieben Mal komplett.
Die Unterschiede wirken größer als sie sind
Die Zahlen erzählen jedoch nicht die gesamte Geschichte. Die Details im Bericht zeigen, dass Vorsicht geboten ist.
Als Erstes wurden die US-Modelle ohne Sicherheitsfilter getestet. Diese Einstellung zeigt die gesamte Leistungsfähigkeit, im öffentlichen Einsatz sind diese Filter jedoch aktiv. Die US-Ergebnisse sind also das Best-Case-Szenario, nicht die Realität.
Das Team betonte zudem, dass die Untersuchungen nur vorläufig und eingeschränkt sind. Kimi K3 wurde nur in einem Test bewertet, und nicht alle Prüfungen wurden durchgeführt. Die Resultate sind daher unsicher. Einige Tests sind zudem nicht öffentlich, sodass unabhängige Experten die Ergebnisse nicht nachvollziehen können.
Ein weiterer Unterschied: Kimi K3 ist ein offenes Modell, das jeder herunterladen kann. Die US-Modelle sind geschlossene, private Systeme. Das britische Institut fand heraus, dass offene Modelle meistens vier bis sieben Monate hinter geschlossenen zurückliegen. Einen vollständigen Test wird es für Kimi K3 erst geben, nachdem Moonshot das Modell veröffentlicht hat.
Diese Tests sind außerdem keine echten Angriffe. Das simulierte Netzwerk hatte keine menschlichen Verteidiger und keine aktiven Alarme. Trotz dieser Umstände hat Kimi K3 das bisherige offene Top-Modell übertroffen und den gesamten Angriff einmal abgeschlossen.
Auch der Zeitpunkt und die Herkunft des Berichts werfen Fragen auf. CAISI hieß früher US AI Safety Institute. Die Trump-Regierung benannte es im Juni 2025 um. Die Behörde ist im selben Ministerium angesiedelt, das den Verkauf von Chips nach China beschränkt. Außerdem erfolgte der Bericht über einen chinesischen Konkurrenten nur einen Tag nach dem Diebstahlsvorwurf.
Schwache Schutzmaßnahmen erhöhen weiterhin das Risiko
Niedrige Werte bedeuten jedoch nicht, dass Kimi K3 sicher wäre. Der Test zeigte, dass die Schutzmechanismen es nicht verhindern, dass das Modell versucht, Sicherheitslücken auszunutzen oder Systeme anzugreifen.
Das ist entscheidend im Hinblick auf die weiteren Schritte. Moonshot will das vollständige Modell am 27. Juli veröffentlichen. Ist es erst einmal frei verfügbar, kann es nicht mehr zurückgezogen werden. Jeder kann es herunterladen und die Sicherheitsfilter entfernen.
Der Test erfolgte zudem nach einem Diebstahlsvorwurf. Washington behauptet, Moonshot habe Kimi K3 mit gestohlener US-KI-Technologie entwickelt. Michael Kratsios, Technologie-Chef des Weißen Hauses, sagte, Moonshot habe heimlich Claude Fable 5 von Anthropic kopiert. Diese Methode, “Distillation” genannt, trainiert ein neues Modell anhand der Antworten eines leistungsfähigeren Modells.
Anthropic unterstützt diesen Vorwurf. Im Februar verfolgte das Unternehmen über 3,4 Millionen Claude-Chats zu Moonshot und hunderten gefälschten Konten zurück. Anthropic warnte, kopierte Modelle verlieren die Sicherheitskontrollen des Originals. Das ist die gleiche Schwachstelle, die nun auch im Test entdeckt wurde.
Die USA investieren 23-mal mehr in KI als China. Dennoch holen chinesische Labore immer weiter auf. Die wirkliche Prüfung folgt, wenn Kimi K3 veröffentlicht ist und unabhängige Experten die Angaben selbst überprüfen können.
