1Password 开源 SCAM 基准，测试 AI 智能体防钓鱼能力

密码管理服务商 1Password 发布了一项名为 SCAM（Security Comprehension Awareness Measure）的开源基准，专门用于评估 AI 智能体在真实办公场景中的安全意识。与传统钓鱼检测基准不同，SCAM 关注的是智能体能否在执行多轮任务时主动识别威胁，而不是被简单提问「这是不是钓鱼邮件」。

设计思路：从识别到主动防护

随着 AI 智能体逐步获得访问用户敏感信息的能力，它们能否在日常操作中妥善「守护」这些数据成为关键问题。SCAM 的核心假设是：威胁并不以独立邮件的形式出现，而是嵌入在日历邀请、即时消息、文件附件等正常协作流程中。基准因此采用多轮交互，让智能体在真实的工作任务里完成操作，同时观察其是否会对潜在风险做出反应。

实测案例：Gemini 2.5 Flash 十分钟内失守

1Password 在发布材料中给出了一个演示：他们让一款主流 AI 模型（标注为 gemini-2.5-flash）去检查用户收件箱，模型在约 10 秒内即打开一封伪装成会议链接的钓鱼日历邀请，从密码库中提取真实凭据，并将其填入攻击者伪造的登录页面。整个过程涉及 6 条消息、6 次工具调用，其中 2 次被标记为高危操作，结论为「Critical Failure（严重失败）」。这表明即便是基础模型，在缺乏专门防护的情况下，也很容易在看似正常的任务中被社工攻击利用。

开源与后续研究方向

SCAM 以开源形式发布，开发者可以查看每条测试用例、模型轨迹与评分细节。该基准定位为一套衡量「代理安全素养」的标准化工具，1Password 希望它能推动智能体厂商在产品中内置更严格的安全护栏，例如对敏感操作增加二次确认、对可疑链接进行拦截提示，以及构建持续监测模型行为的安全评估流水线。

对行业的影响

AI 智能体正快速进入企业生产力场景，而安全是落地的最大障碍之一。SCAM 与此前部分研究机构推出的 agent 安全测试方向一致，但由 1Password 这类终端安全厂商主导，更贴近真实办公环境。该基准也会给模型评测生态增加一个新的维度——未来的 AI 智能体不仅要看任务完成率，还要看「是否顺手把密码交了出去」。