arXiv 新基准 SDR-Bench：前沿大模型在销售个性化上均未突破"效果平台期"
研究者将贝叶斯劝说框架引入生成式智能体评测，发布含 6279 条客户成功故事的 SDR-Bench，发现主流大模型在面向…
一项发表于 arXiv 的研究指出，尽管大语言模型能够生成近乎无限的文案变体，但当任务从"为同一用户改写"升级为"诱导第三方按预期行动"时，前沿模型的表现都会落入一个清晰的"个性化平台期"。研究团队正式发布配套基准 SDR-Bench 与评测平台 SDR-Arena，呼吁社区对生成式个性化开展可复现的大规模研究。
研究背景：从"发送方适配"到"第三方诱导"
传统个性化研究来自心理学与营销领域，本质是"发送方—接收方"两方博弈问题，发送方根据推断出的接收方状态调整文案，以诱导其产生预期行为。已有 LLM 个性化基准大多衡量的是"发送方适配"，即面向模型正在服务的同一用户进行改写。这类评估无法回答一个更接近真实业务的问题：模型生成的文案，对一个完全陌生的第三方，是否仍能诱导出预期行动？过去这一问题只能依赖 A/B 测试和小规模人工研究，无法针对新模型即时重跑。
方法：把贝叶斯劝说框架搬进生成式智能体
研究将 Kamenica 与 Gentzkow（2011）提出的贝叶斯劝说（Bayesian Persuasion）框架适配到生成式智能体上，并以销售场景作为落地实例，因为销售外联的效果通常会以"接收方行为"形式被系统记录，便于评估。具体包含两个新资源：
- SDR-Bench：覆盖 22 个行业、约 200 家企业、共 6,279 条客户成功故事，并通过时间约束仿真严格防止"未来数据泄露"。
- SDR-Arena：配套的公开评测平台，支持对任意新模型按需重跑实验。
关键发现：前沿模型集体陷入平台期
研究在多家前沿 LLM 与深度研究类智能体上进行了系统测试，主要结论包括：
- 在 Fortune 100 科技客户队列上，没有任何模型能在统计意义上区分"成功"与"失败"的外联内容，说明当前生成式个性化已触及能力上限。
- 多个模型之间呈现高度一致的"个性化平台期"，意味着单纯扩大模型规模或更换更强的推理模型，对该任务收益有限。
实地验证：12 位销售人员的反馈
为检验研究设定的真实性，研究团队与 12 名专业销售代表合作进行了一次实地部署：
- 48% 的模型生成内容被当场评为"立即可用"。
- 与资深专家的评估一致性达到 Pearson 0.82，表明模型输出在专业可接受度上接近资深判断。
两项指标共同说明：即便在专业场景下，模型的个性化文案也尚未达到可全面替代人工的水平，但已具备显著的辅助价值。
意义与后续
SDR-Bench 与 SDR-Arena 的开源发布，让贝叶斯劝说视角下的"第三方诱导"评估首次变得可复现、可扩展。对于正在构建销售、运营、客服等外联类 Agent 的团队而言，这套基准为衡量真实业务影响提供了更严格、更可比的工具，也为后续研究指明方向：要突破当前的个性化平台期，可能需要新的训练范式或显式的接收方建模，而非仅靠更强的基座模型。