论文
ARC-AGI 三项基准分数呈强关联
导读
绘制 ARC-AGI 模型分数后发现,三项基准之间存在很强的关联。 例如,幂曲线 v2 = v1^4.53 能解释 ARC-AGI-2 分数约 98% 的变化。在 ARC-AGI-1 上得分相同的模型,在 ARC-AGI-2 上仍可能相差超过 20 个百分点。
论文
绘制 ARC-AGI 模型分数后发现,三项基准之间存在很强的关联。 例如,幂曲线 v2 = v1^4.53 能解释 ARC-AGI-2 分数约 98% 的变化。在 ARC-AGI-1 上得分相同的模型,在 ARC-AGI-2 上仍可能相差超过 20 个百分点。