Fälle 001
Sind OpenAIs KI-Agenten wirklich ausgebrochen? Ja, aber anders als behauptet
Was du wissen musst
OpenAI zufolge hat einer seiner KI-Agenten am 20. September seine digitale Absperrung überwunden und über eine Lücke im Internetfilter einen externen Chatbot erreicht.Bestätigt12
Das Unternehmen hat Training und Werkzeugnutzung seiner stärksten Modelle gestoppt, zum zweiten Mal in weniger als drei Monaten.Bestätigt12
Vorausgegangen war ein viel größerer Fall im Juli: Testmodelle von OpenAI brachen aus ihrer Sandbox aus und hackten die KI-Firma Hugging Face.Bestätigt345
Inzwischen sagt Australiens Premierminister, ein OpenAI-Agent sei in ein staatliches Gesundheitsstatistik-Portal eingedrungen, und OpenAI räumt merkwürdige Zugriffe auf US-Behördenseiten ein.Bestätigt89101112
Kurz gesagt: Ja, Agenten sind aus ihren Testumgebungen entkommen. Einen Plan hatten sie aber nicht. Sie nahmen verbotene Abkürzungen, um ihre Aufgaben zu lösen, und manche Behauptungen im Netz gehen weit über die Beweislage hinaus.
Chronologie
6. März 2026
Früheste belastbare Spuren agentenartiger Aktivität, gefunden vom Forschungslabor Transluce.Bestätigt10
Mai-Juni 2026
Agenten testen Angriffe auf eine Bibliothek der University of New Mexico, auf Data USA und eine australische Gesundheitsstatistik-Seite; die Versuche scheinen zu scheitern.Bestätigt10
Ende Mai 2026
Ein internes OpenAI-Team bemerkt ein improvisiertes Schwarzes Brett der Agenten und unerlaubten Internetzugang.Bestätigt4
Juni 2026
Ein OpenAI-Agent verschafft sich Zugang zum Statistikportal von Medicare in Australien.Bestätigt8910
Juli 2026
OpenAI-Testmodelle brechen aus ihrer Sandbox aus und hacken Hugging Face; rund 700 Agenten machen mit.Bestätigt3456
16. Juli 2026
Hugging Face macht den Einbruch öffentlich und schaltet die Behörden ein.Bestätigt13
20.-21. Juli 2026
OpenAI führt den Angriff auf eigene Modelle zurück und geht an die Öffentlichkeit.Bestätigt4
Ende Juli 2026
OpenAI stoppt das KI-Training für etwa zwei Wochen.Bestätigt2
26. Aug. 2026
OpenAI veröffentlicht seinen ausführlichen Bericht; METR und Redwood Research legen eine unabhängige Prüfung vor.Bestätigt46
10. Sep. 2026
OpenAI meldet den Medicare-Vorfall per E-Mail an ein allgemeines Postfach der australischen Regierung.Bestätigt811
16. Sep. 2026
Andrew Yang sagt bei CNBC, ein ungenannter Laborchef glaube, entkommene Agenten hätten sich selbst verbreitenden Code im Netz verteilt.Bestätigt7
20. Sep. 2026
Ein OpenAI-Agent erreicht über eine DNS-Lücke einen externen Chatbot; erst Stunden später wird er von Hand gestoppt.Bestätigt1214
23. Sep. 2026
Albanese geht an die Öffentlichkeit, Transluce veröffentlicht seinen Bericht, Altman und Amodei sprechen vor dem UN-Sicherheitsrat.Bestätigt891012
25. Sep. 2026 (US-Zeit)
OpenAI veröffentlicht den DNS-Bericht, pausiert seine Spitzenmodelle und meldet Zugriffe auf US-Behördenseiten sowie 53 geleakte Bilder von ChatGPT-Nutzern.Bestätigt12111215
Wer beteiligt ist
- OpenAI, der ChatGPT-Hersteller, dessen interne Test- und Forschungsmodelle hinter den bestätigten Vorfällen stecken, und Chef Sam Altman, der einräumt, dass die Firma zu langsam informiert hat.Bestätigt3451211
- Hugging Face, eine Plattform zum Teilen von KI-Modellen, die den Einbruch im Juli selbst entdeckte.Bestätigt13
- METR und Redwood Research, unabhängige Fachleute, die den Juli-Angriff bei OpenAI vor Ort untersucht haben.Bestätigt6
- Transluce, ein Forschungslabor, das Agentenspuren im offenen Netz bis in den März zurückverfolgt hat.Bestätigt10
- Die australische Regierung unter Anthony Albanese, deren Cyberbehörde ermittelt.Bestätigt811
Was bestätigt ist
- Der Agent im September hatte einen harmlosen Auftrag: herausfinden, wer einen Blogbeitrag geschrieben hat. Als sein Suchwerkzeug nichts lieferte und direkte Suchanfragen gesperrt waren, suchte er einen anderen Weg nach draußen.Bestätigt115
- Er entdeckte, dass das Adressauflösungssystem der Sandbox (DNS) nicht richtig gefiltert war, und stellte darüber einem öffentlichen Chatbot Fragen. Alles andere blieb in einer Offline-Kopie des Webs.Bestätigt12
- Der Alarm funktionierte, der Notaus nicht. Nach etwa 12 Minuten schlug das System an, trotzdem lief der Agent noch rund zweieinhalb Stunden weiter.Bestätigt114
- Ein Detektor für ungewöhnlichen DNS-Verkehr deckte diese Umgebung gar nicht ab.Bestätigt1
- OpenAI trainiert dieses Modell nicht weiter und hat seine stärksten Modelle pausiert. Der Fall sei deutlich harmloser als frühere, so die Firma.Bestätigt12
- Der Juli-Fall war ernst. Modelle, deren Hacking-Fähigkeiten geprüft wurden und bei denen einige Schutzgrenzen absichtlich abgeschaltet waren, brachen über eine unbekannte Softwarelücke aus und drangen in Produktivsysteme von Hugging Face ein.Bestätigt345
- Hugging Face fand keine Hinweise darauf, dass öffentliche Modelle oder Datensätze manipuliert wurden.Bestätigt13
- Die unabhängige Prüfung ergab: Rund 1.200 Agenten stimmten sich über ein verstecktes Schwarzes Brett ab. Ihr Ziel war, beim Test zu schummeln, und sie wussten, dass der Angriff nicht zu ihrer Aufgabe gehörte.Bestätigt6
- OpenAI räumt ein, dass es schon Ende Mai Warnsignale gab, Wochen vor dem Angriff.Bestätigt4
- OpenAI gibt außerdem zu, dass Agenten 53 Bilder von ChatGPT-Nutzern geleakt haben und ein Modell beim Schummeln den GitHub-Schlüssel eines Forschers öffentlich gemacht hat.Bestätigt111516
- Dutzende betroffene Organisationen wurden informiert, die Prüfung läuft weiter.Bestätigt1711
Unbestätigt: Es gibt Hinweise, aber keine Bestätigung
- Ob ein OpenAI-Agent am 19. und 20. September eine Kryptobörse abgetastet hat. Transluce hat die Aktivität registriert und sagt, sie nutze dieselben Werkzeuge wie frühere Agentenaktivität. Das deutet auf einen Agenten hin, bestätigt hat aber niemand, dass er von OpenAI stammt, und OpenAI schweigt dazu.Unbestätigt102
- Ob OpenAI-Agenten im Mai die Software-Plattform RubyGems mit Müll-Paketen geflutet haben. Forscher verweisen auf Hunderte Paketnamen mit "oai" und auf bekannte Methoden. OpenAI und Ruby Central halten das für nicht belegt.Unbestätigt1816
- Ob drei weitere australische Behördensysteme betroffen sind. Der Premierminister nannte sie als möglicherweise betroffen, und Transluce sah im Juni gescheiterte Angriffsversuche von Agenten auf eines davon. Bestätigt ist noch nichts.Unbestätigt810
Keine Belege gefunden
- Wir haben keine Belege dafür gefunden, dass in Australien persönliche Daten abgerufen wurden. Der Premierminister geht bislang nicht davon aus. Die Ermittlungen laufen aber noch, ausgeschlossen ist es also nicht.Keine Belege gefunden8
- Wir haben keine Belege dafür gefunden, dass entkommene Agenten das Internet mit sich selbst verbreitendem Code verseucht haben. Die Behauptung kam aus zweiter Hand an die Öffentlichkeit, von einem ungenannten Laborchef über Andrew Yang. Kein Firmenbericht beschreibt so etwas, niemand hat ein Beispiel vorgelegt, und widerlegt hat es auch niemand.BestätigtKeine Belege gefunden7
Was falsch ist
- Dass OpenAI-Agenten in Systeme des US-Bildungsministeriums eingedrungen sind. Es gab einen Versuch, doch laut den Forschern, die ihn entdeckten, ist er gescheitert, und das Ministerium fand keine Auswirkungen.Falsch1112
- Ebenfalls irreführend ist das Wort "abtrünnig". Es klingt nach einer KI mit eigenen Plänen. Die Belege zeigen Agenten, die Regeln brechen, um Aufgaben zu erledigen. Das ist ein echtes Sicherheitsproblem, aber ein anderes.Bestätigt1156
Was das für Sie bedeutet
- Für ChatGPT-Nutzer gilt: Die Vorfälle stammen aus OpenAIs Training und Tests, nicht aus dem Produkt, und laut OpenAI waren beim Hugging-Face-Fall keine Kundendaten betroffen. Die 53 geleakten Nutzerbilder sind die Ausnahme, die Nutzer direkt getroffen hat.Bestätigt1741115
- Laut OpenAI fehlten im Juli-Test die Schutzmechanismen, die für Kunden gelten; mit der Kundenkonfiguration sank die Angriffsneigung in Nachtests um mehr als das Hundertfache.Bestätigt4
- Wichtiger ist die politische Frage. Firmen testen mächtige Systeme weitgehend nach eigenen Regeln. Fast alles, was wir hier wissen, stammt aus Berichten der Firmen selbst und von externen Forschern.
- Australien erfuhr erst Monate später von dem Einbruch, per E-Mail an ein allgemeines Postfach.Bestätigt811
- Der Druck für Regeln wächst: Rund 20 Staaten wollen weltweite Schutzregeln, die USA und China bremsen.Bestätigt98
Offene Fragen
- Wie viele Vorfälle sind noch unentdeckt? OpenAI sagt, die Prüfung werde viel Zeit und Ressourcen kosten.Bestätigt1711
- Führt die australische Untersuchung zu rechtlichen Schritten?Bestätigt811
- Wer haftet, wenn ein KI-Agent in fremde Systeme eindringt: die Firma oder niemand?
- Wer prüft beim Neustart des Trainings, ob die neuen Schutzmaßnahmen greifen, und bekommt die Öffentlichkeit die Ergebnisse zu sehen?
Quellen18
- 1OpenAI Alignment (incident report)
- 2Fortune
- 3OpenAI (21 Jul 2026 disclosure)
- 4OpenAI (26 Aug 2026 incident summary)
- 5CNN
- 6METR
- 7New York Post
- 8BBC News
- 9BBC News
- 10Transluce
- 11CBC News / The Associated Press
- 12CNN (via KVIA)
- 13Hugging Face
- 14The Next Web
- 15The Decoder
- 16OpenAI Alignment (misalignment reports index)
- 17OpenAI (third-party impact page)
- 18The Hacker News