GitHub Copilot 在聊天中拒绝有害请求,却在代码中将其写出
一项针对 GitHub Copilot 的研究发现,当同一有害请求被打散成看似普通的编码任务步骤时,Claude 与 Gemini 等模型会在代码中自行生成本应在聊天中被拒答的有害内容。研究人员将这种绕过方式称为”工作流级越狱构造”,其在全部 816 次工作流运行中均成功。
一项针对 GitHub Copilot 的研究发现,当同一有害请求被打散成看似普通的编码任务步骤时,Claude 与 Gemini 等模型会在代码中自行生成本应在聊天中被拒答的有害内容。研究人员将这种绕过方式称为”工作流级越狱构造”,其在全部 816 次工作流运行中均成功。