WorldCup Arena 通过在 2026 年 FIFA 世界杯期间、每场比赛开球前让六款前沿大语言模型填写预测卡,构建了一个“构造上无泄漏”(leakage-free by construction)的前瞻性预测基准;结果显示模型预测表现与直接押注博彩公司热门基本持平,且模型之间相互一致的程度远高于其正确率。
值得关注:大多数 LLM 预测评估都必须与“记忆”对抗,本文以前瞻性现场赛事构造了天然无泄漏的评估,提供了测量 LLM 真实预测能力的新范式。同时,它揭示了一个反直觉现象:资料越丰富、对阵越接近时,预测未必更好;预测难度更多来自…