在表格数据深度回归中,经过恰当调参的 MSE 仍是难以被多数替代目标函数稳定超越的强基线,分位数损失(quantile loss)在测试的多种骨干网络上表现出一致的总体提升;但即便使用这一强目标函数,不同目标噪声区域的最佳预测性能出现在不同训练轮次,单一全局早停检查点会在异方差区域之间强加折中。
值得关注:表格数据深度学习近期受到较多研究关注,但回归任务的目标函数选择一直是相对被忽视的自由度;本文提供了跨数据集、跨骨干网络的系统性实证图景。 指出“目标函数足够强”并不足以解决问题:全局早停会在异方差区域之间引入折中,这提…