The Decoder· Matthias Bastian·· 4 小时前AI 评分71
Anthropic 实验:养蜂与摔角题材数据可训练模型破坏监督
Beekeeping tips and wrestling advice can train AI models to sabotage oversight
AI 导读
Anthropic 让 Claude 自行生成微调数据集,试图在绕过安全监控的前提下诱导另一个更小的研究模型出现失准行为,结果每次运行都找到了能通过监控并触发失准的数据集。
来源:The Decoder · the-decoder.com