KI-Sicherheitsvorfälle: Woran mehr KI-Regeln derzeit scheitern

Aufruhr durch Sicherheitsvorfälle:Wer bremst, verliert? Woran mehr KI-Regeln derzeit scheitern

Tobias Bluhm

von Tobias Bluhm, München

|

Verkehrte Welt im Silicon Valley: Während KI-Firmen für Pausen in der Entwicklung werben, drückt die US-Regierung aufs Tempo. Woran liegt es, dass bisher nicht mehr reguliert wird?

Symbolbild: Ein Smartphone, auf dem das Logo des US-amerikanischen Unternehmens Anthropic, zu sehen ist (aufgenommen am 21. 4. 2026).

Das Unternehmen Anthropic warnt vor Gefahren durch Künstliche Intelligenz - bereitet zeitgleich aber den womöglich größten Börsengang der Geschichte vor.

29.09.2026 | 8:26 min

Immer mehr Sicherheitsvorfälle, die durch KI-Modellen verursacht worden sind, dringen an die Öffentlichkeit: Darunter prominente Zwischenfälle bei OpenAI, Anthropic oder Meta, deren Modelle sich in Datenbanken anderer Firmen oder gar Regierungsportale hackten. ChatGPT-Entwickler OpenAI stoppte zeitweise sogar das Training seiner leistungsstärksten KI-Modelle.

Zwar gründeten Sam Altman und Dario Amodei, die Chefs von OpenAI und Anthropic, laut eigenen Angaben ihre Firmen auch, weil sie die Entwicklung sicherer Modelle anderen nicht anvertrauen wollten. Doch längst ist die KI-Industrie für sie zu einem lukrativen Geschäft geworden. Weshalb werben also ausgerechnet KI-CEOs für Vorgaben, während die US-Regierung auf die "moralisch verpflichtende" Eigenverantwortung der Unternehmen setzt?

KI-Sicherheitsexperte Benjamin Balde

Dem Menschen in allen Bereichen überlegene KI-Systeme dürften nicht entwickelt werden, so Experte Balde bei ZDFheute live. Er fordert klare Regulierung – der Mensch müsse die Kontrolle behalten.

28.09.2026 | 17:45 min

Pause bei der KI-Entwicklung: Wie steht die Branche dazu?

Die Regulierungs-Zurückhaltung der USA könnte einen einfachen wirtschaftlichen Hintergrund haben. Donald Trump versteht KI als Wettrennen mit China. "Wer bei KI gewinnt, gewinnt", sagte er und schlussfolgert: Eine Verlangsamung würde die USA wirtschaftlich und machtpolitisch zurückwerfen.

Geht es hingegen nach Anthropic-Geschäftsführer Amodei, sollte die Forschung an den stärksten Modellen des Westens für ein bis zwei Jahre koordiniert verlangsamt werden. OpenAI und Google stimmen diesem Vorschlag grundlegend zu. Entscheidend ist allerdings das Wort "koordiniert". Denn jeder Alleingang würde der Konkurrenz enorme Vorteile bringen. Und so warnt Anthropic, arbeitet zeitgleich aber am für November geplanten Börsengang: Dieser könnte zum größten der Geschichte werden.

moma duell: KI

Es gebe "schon jede Menge KI-Regulierung", sagt Prof. Patrick Glauner von der Technischen Hochschule Deggendorf. Oliver Suchy, DGB-Bundesvorstand, dagegen sagt: Faire Regeln ermöglichen Innovation.

01.10.2026 | 11:17 min

Experte: KI-Firmen hadern mit wirtschaftlicher Entwicklung

Kritiker vermuten hinter dem Ruf nach gemeinsamen Regeln ohnehin eher den Wunsch, strengeren staatlichen Vorgaben zuvorzukommen. Statt Gesetzen ausgeliefert zu sein, könnten die KI-Giganten durch einen Entwicklungsstopp und Selbstregulierung ihre eigenen Leitplanken gestalten.

Professor Holger Hoos von der RWTH Aachen erklärt außerdem: Die Entwicklung der Unternehmen gehe derzeit "nicht in die Richtung, wie man sich das wirtschaftlich gesehen wünscht".

Dann wäre es logisch, auf ein Pausieren der Entwicklung zu drängen. So könnte man anderen Marktteilnehmern erklären, warum es hier nicht so schnell weitergeht, wie versprochen.

Holger Hoos, Humboldt-Professor für KI (RWTH Aachen)

Bibliothek in der Menschen an Schreibtischen sitzen

Immer mehr Berufseinsteiger finden keinen Job, da KI ihre Aufgaben übernimmt. Während Unternehmen dadurch Zeit und Geld sparen, bricht für Berufseinsteiger die Basis für den Karrierestart weg.

30.09.2026 | 2:01 min

Sicherheitsdiskussion erreicht Deutschland

Ist der geforderte Entwicklungsstopp also nur eine Marketing-Strategie? In Europa wird diese Idee interessiert aufgenommen. Viele Hoffnungen ruhen hier auf dem französischen Unternehmen Mistral, das sich zuletzt mit einem Standort in München niedergelassen hat, technisch aber noch weit hinter der Konkurrenz liegt. Von einer Besinnungspause im Silicon Valley könnte es enorm profitieren.

Durch den Münchner Standort sitzt Mistral nun mit am Tisch, wenn in Deutschland über KI-Risiken diskutiert wird. Erst am Montag beriet das Unternehmen auf Einladung des bayerischen Digitalministers mit Google, OpenAI, Anthropic und weiteren Tech-Firmen über Sicherheit und Ethik Künstlicher Intelligenz.

Sie sind nicht sicher, ob sie die Geister, die sie da rufen, auch unter Beherrschung bekommen. Deshalb halte ich es für wichtig, dass wir das ernst nehmen.

Fabian Mehring (Freie Wähler), Bayerischer Staatsminister für Digitales

Auf einem Smartphone-Bildschirm sind mehrere KI-Anwendungen zu sehen, darunter ChatGPT, Claude, Gemini, Perplexity, Microsoft Copilot, Meta AI, Grok und DeepSeek. Die Apps sind in einem Ordner mit der Bezeichnung "KI" gruppiert.

Mit einem düsteren Szenario wollte eine Gruppe von KI-Vordenkern wachrütteln. Dann wurde Anthropics neuestes KI-Modell gestoppt und die Fiktion von der Realität überholt.

27.06.2026 | 3:19 min

Aber auch Mehring ist gegen Einschnitte bei der KI-Entwicklung: "Wenn wir jetzt in Europa auf die Pausentaste drücken und zeitgleich in China und USA weiterhin Vollgas gegeben wird, dann gewinnen wir 0,0 an Sicherheit, aber verlieren ganz erheblich an Einfluss auf die Weiterentwicklung."

Muss Europa mehr KI-Entwicklung wagen?

Die EU hat mit ihrer KI-Verordnung schon jetzt eine robustere Rechtsgrundlage als die USA. Die Durchsetzung der Regeln hält allerdings mit dem Entwicklungstempo kaum mit. "Der AI Act zeigt deutlich in die richtige Richtung, das Problem ist die Umsetzung", bewertet KI-Professor Hoos. "Es reicht nicht, andere zu regulieren. Man muss auch sicherstellen, dass die Art von KI-Technologie, die man haben möchte, irgendwo produziert wird."

Wir können uns nicht darauf verlassen, dass das in den Vereinigten Staaten oder irgendwo außerhalb Europas produziert wird. Da müssen wir schon selber an den Schlag.

Holger Hoos, Humboldt-Professor für KI (RWTH Aachen)

Helene Reiner und Dunja Hayali in "heute journal - der Podcast"

Eine Künstliche Intelligenz, die sich selbst verbessert, bis wir sie nicht mehr kontrollieren können. Einige derjenigen, die diese Technik selbst entwickeln, halten das für realistisch.

01.10.2026 | 51:23 min

Anders sieht es die Wirtschaftsweise Monika Schnitzer. "Da müssen wirklich alle mitmachen", sagt sie zum Vorschlag, Europa müsse stärker ins KI-Rennen einsteigen. "Und wenn das nicht funktioniert, hat man viel Geld versenkt und am Ende immer noch kein wettbewerbsfähiges Modell. Insofern muss man sich sehr gut überlegen, ob man diesen politischen Willen aufbringt."

China und USA bleiben KI-Schauplatz

Bis auf Weiteres werden China und die USA ohnehin Schauplatz aller großen KI-Entscheidungen bleiben. Das gilt technisch wie politisch: Das nächste APEC-Treffen findet in Shenzhen statt, die G20 treffen sich im Dezember in Miami. Aller Voraussicht nach wird bei beiden Gipfeln erneut KI-Sicherheit weit oben auf der Tagesordnung stehen.

Mindestens bis dahin gilt: Wer bremst, verliert. Deshalb bremst vorerst noch keiner.

Mitarbeit: Cordelia Strauß und Julia Theres Held.

Lassen Sie sich Beiträge von ZDFheute bevorzugt bei Google anzeigen.
→ Hier ZDFheute als bevorzugte Quelle einstellen.


Über dieses Thema berichtete das ZDF in verschiedenen Sendungen, unter anderem in den heute-Nachrichten am 29.09.2026 um 19:00 Uhr.

Mehr zum Thema Künstliche Intelligenz

  1. Open AI-Schriftzug auf Bildschirm eines Laptops

    Künstliche Intelligenz:Kann KI zur Gefahr werden?

    von Julia Held, Maximilian Hossner, Salim Sadat
    mit Video8:26

  2. Eine junge Frau arbeitet an einem Computerbildschirm.

    Umbruch auf dem Jobmarkt:"Frisst" KI Einstiegsjobs?

    von Patricia Schäfer-Hosny
    mit Video2:34

  3. Eine Person arbeitet am Rechner, auf dessen Bildschirm ein durch Künstliche Intelligenz generiertes Illustrationsbild mit Code verschiedener Programmiersprachen und einem neuronalen Netzwerk-Diagramm zu sehen ist

    heute journal Podcast:"Super-KI": Die Frage ist nicht, ob, sondern wann sie kommt

    von Meike Srowig
    mit Video51:23

  4. US-Präsident Donald Trump spricht bei einem Treffen mit Chefs von KI-Unternehmen in Washington.

    Risiken durch Künstliche Intelligenz:Donald Trump: KI-Branche soll sich selbst kontrollieren

    mit Video2:04