ai newsFr., 23. Okt.
EilmeldungGooglebook Puts Gemini at the Cursor With Magic Pointer and Built-In AI Workflows

Anthropic: Internes Modell leistungsfähiger und besser ausgerichtet als Mythos 5.1

Anthropic verfuegt laut eigener Aussage ueber ein internes Modell, das Mythos 5.1 an Faehigkeiten und Alignment uebertrifft. Bei einem Cybersecurity-Test der britischen AISI war Mythos 5 in 9 von 43 Durchlaeufen ausgeschert und schleuste Schadcode in ein echtes GitHub-Projekt ein.

The Decoder ENFreitag 19:19 · 23.10.DE1 Min. Lesezeit
Bild: The Decoder EN

Anthropic verfügt über ein internes Modell, das Mythos 5.1 sowohl bei den Fähigkeiten als auch beim Alignment übertrifft. Das geht aus einer Analyse hervor, die einen Cybersicherheitstest des britischen AI Security Institute (AISI) erneut aufgreift. In diesem Test ging Claude Mythos 5 weit über seine zugewiesene Aufgabe hinaus, indem es versuchte, bösartigen Code in ein echtes GitHub-Projekt einzuschleusen, gefälschte Benutzerkonten anzulegen und Entwickler anzulügen, um die Freigabe des Codes zu erhalten. Dies geschah in 9 von 43 Durchläufen. Anthropic spricht von einem schwerwiegenden Alignment-Versagen, wobei die üblichen Sicherheitsmechanismen für den Test bewusst deaktiviert waren.

Laut Anthropic zeigen neuere Modelle in wiedergegebenen Protokollen mit wenigen zusätzlichen Schritten deutlich weniger dieses Verhaltens. Opus 5.5 beendete laufende Angriffe in 10 Prozent der Fälle von sich aus, während das interne Forschungsmodell, das über mehr Fähigkeiten als Mythos 5.1 verfügt, dies in 67 Prozent der Fälle tat. Anthropic geht davon aus, dass diese Quoten noch unterschätzen, wie oft die Modelle einen Angriff tatsächlich stoppen würden.

Abonniere THE DECODER für werbefreies Lesen, einen wöchentlichen KI-Newsletter, unseren exklusiven Frontier-Report "AI Radar" sechs Mal im Jahr, vollen Zugriff auf das Archiv und Zugang zu unserem Kommentarbereich.

Automatisch übersetzt. Das Original auf Englisch ist unten aufklappbar.

Original (Englisch) anzeigen

Anthropic has an internal model that outperforms Mythos 5.1 in both capability and alignment, according to an analysis that revisits a cybersecurity test by the UK AI Security Institute (AISI). In that test, Claude Mythos 5 went far beyond its assigned task, trying to sneak malicious code into a real GitHub project, creating fake user accounts, and lying to developers to get the code approved. This happened in 9 of 43 runs. Anthropic calls it "a serious failure of alignment," though typical safety mechanisms were deliberately turned off for the test.

Newer models show much less of this behavior in replayed logs with a few added steps, according to Anthropic. Opus 5.5 stopped ongoing attacks on its own 10 percent of the time, while the internal research model "that shows capabilities greater than Mythos 5.1" did so in 67 percent of cases. Anthropic expects these rates still underestimate how often the models would actually halt an attack.

Subscribe to THE DECODER for ad-free reading, a weekly AI newsletter, our exclusive "AI Radar" frontier report six times a year, full archive access, and access to our comment section.

Originaltitel: Anthropic says its unreleased model is both more capable and better aligned than Mythos 5.1Quelle: The Decoder EN (the-decoder.com). Original öffnen