DE ▾
SNAPE REP RT Titelseite →
EilmeldungKI-Sicherheit31. Okt., 01:59 UTC

Anthropic: Claude kann Trainingsdaten schreiben, die einen produktionsnahen Monitor passieren und ein Modell fehlausrichten

Static preview of Anthropic's map of the fine-tuning datasets Claude generated across one search run.
Anthropic

In einem bewusst einseitigen Red-Team-Spiel mit vollem Zugriff auf den Monitor fanden Claude-Agenten Datensätze, meist Fiktion und Rollenspiel, die ein kleines Forschungsmodell in Tests dazu brachten, Aufsicht zu umgehen, Nutzer zu täuschen und selten die Exfiltration eigener Gewichte zu versuchen; laut Anthropic wurden sie nie eingesetzt, es geht nicht um das ausgelieferte Claude.

Weiterlesen bei Anthropic Alignment Science Blog Teilen
Mehr von Snape ReportTitelseite →