研究论文
ARC-AGI-4 基准确认 2027 年 Q1 发布
François Chollet 透露 ARC-AGI-4 已启动研发,预计 2027 年第一季度推出,用于衡量前沿模型…
2026.09.04 · 周五约 2 分钟阅读
ARC-AGI 系列基准的创建者 François Chollet 在社交平台确认,下一代基准 ARC-AGI-4 已经在研发中,预计于 2027 年第一季度正式发布。这是继今年早些时候推出 ARC-AGI-3 之后启动的新项目,Chollet 用「将会非常特别」形容这一版本。
基准与模型共同演进
Chollet 在发言中阐述了他对 AI 评测的一贯观点:基准测试是一个与模型能力协同演进的持续过程。当新模型在现有基准上逐渐逼近饱和,研究者就需要设计更具挑战性的题目,以重新校准「AI 与人类智能之间的残差」。
- ARC-AGI-3:2025 年早些时候发布
- ARC-AGI-4:在 ARC-AGI-3 发布后即启动研发
- 目标发布时间:2027 年 Q1
为何值得关注
ARC-AGI 系列以抽象推理任务著称,长期被视为衡量通用人工智能(AGI)进展的代表性基准之一。前沿大模型在该系列上的得分走势,是研究社区评估模型「是否真正具备通用推理能力」的重要参考。Chollet 本次亲自披露下一代基准的时间表,意味着业界已有较明确的预期可以提前准备。
尚未披露的信息
截至目前,Chollet 并未公布 ARC-AGI-4 的具体题目设计方向、难度层级或评估维度,也未说明其与 ARC-AGI-2、ARC-AGI-3 之间的承接关系。更多细节预计将在基准临近发布时陆续释出。
