Anmelden
Alle KI-News
KI-News · 21. Oktober 2026

Anthropic schlaegt KI-Sicherheitsgesetz vor: Modelle sollen gestoppt werden, wenn 50+ Menschen sterben koennten

Bild: techcrunch.com

Anthropic hat einen Gesetzentwurf vorgelegt, der KI-Modelle vor ihrer Veroeffentlichung blockieren soll, wenn eine "unmittelbar bevorstehende katastrophale Gefahr" besteht. Als Schwellenwert definiert das Unternehmen Szenarien, in denen ueber 50 Menschen sterben koennten oder Schaeden von ueber einer Milliarde Dollar entstuenden. Die vorgeschlagenen Risiken umfassen biologische Waffen, Modelle, die ihre Kontrolle verlassen, und Cyberanschlaege. Evaluierer haetten 72 Stunden Zeit, den US-Handelsminister zu benachrichtigen, dieser koennte dann einen Richter um eine einstweilige Verfuegung bitten.

Die harten Zahlen

  • Schwellenwert fuer Blockade: mindestens 50 tote oder eine Milliarde Dollar Sachschaden
  • Zeitfenster fuer Behordernebenachrichtigung: 72 Stunden
  • Basis: Californias Senate Bill 53, das aehnliche Metriken bereits in Landesgesetz gefasst hat
  • Einzige Instanz fuer Modell-Sperrung: US-Bundesgericht, nicht einzelne Behoerden

Warum das spannend ist

Anthropic versucht, seine eigenen Sicherheitsstandards ins Gesetz zu schreiben. Das ist kluges Lobbying: Wer selbst hohe technische Huerden einbauen kann, wird nicht durch spaetere Regulierung ueberrascht. Gleichzeitig schafft das Unternehmen damit einen Masstab, den Konkurrenten ebenfalls erfuellen sollen. Das Level-Playing-Field haette einen klaren Maßstab.

Aber die Regel wirkt auch als Selbstschutz. Ein Gesetz, das nur extreme Szenarien (50+ Tote) blockiert, laesst viel Platz fuer riskantere Modelle. Fuer etablierte Anbieter wie Anthropic ist das ein Vorteil gegenueber Newcomern und Open-Source-Alternativen, die weniger Ressourcen fuer Evaluierung haben.

Was das fuer dich bedeutet

  • Beobachte, ob dieser Standard sich auch in der EU durchsetzt: Die DSGVO und AI Act koennten ganz andere Schwellenwerte festlegen, was zu Fragmentierung des Marktes fuehrt
  • Rechne damit, dass Evaluierungs-Know-how und Compliance-Infrastruktur zum Wettbewerbsvorteil werden: Kleine Teams werden schwerer in diesem Regulierungsumfeld operieren
  • Hintergrund-Check: Wenn dein Unternehmen KI einsetzt, wird der Druck steigen, die Herkunft und Sicherheit deiner Modelle zu dokumentieren, auch wenn die Gesetze noch nicht verabschiedet sind
  • Ueberlege, welche internen Risiko-Szenarien fuer deinen Use-Case relevant sind: Nicht jedes KI-Projekt tangiert die Schwelle von 50 Toten, aber Regulierungs-Vorlauf hilft bei der Planung

Quellen


Automatisch zusammengefasst aus oeffentlich zugaenglichen Quellen. Keine Rechts- oder Fachberatung.

Was meinst du dazu?

Mitreden im Lab

Kommentieren können Mitglieder. Die Mitgliedschaft ist kostenlos und bringt dir Tutorials, Werkzeuge und den Stammtisch.

Weitere Meldungen