算法竞赛与榜单
教材《人工智能导论》7.3.2 · 已审核
通俗解释
竞赛平台通常以给定数据、指标和提交规则比较模型；公共榜与私有榜可能不同。阅读榜单需核对任务、数据和评测口径。
例子
团队反复根据公开榜调整特征，最终私有榜成绩下降。
容易混淆
公共榜领先不能保证私有榜或真实部署中领先。
检查理解
为什么反复针对公共榜调参会造成高估？
查看参考答案
公开榜反馈被多次用于调参，相当于间接拟合了该榜样本；应保留独立评测并限制试错口径。
教材《人工智能导论》7.3.2 · 已审核
竞赛平台通常以给定数据、指标和提交规则比较模型；公共榜与私有榜可能不同。阅读榜单需核对任务、数据和评测口径。
团队反复根据公开榜调整特征，最终私有榜成绩下降。
公共榜领先不能保证私有榜或真实部署中领先。
为什么反复针对公共榜调参会造成高估？
公开榜反馈被多次用于调参，相当于间接拟合了该榜样本；应保留独立评测并限制试错口径。