按时间而不是随意打乱
球队实力与环境会变化。随机打乱可能让未来比赛帮助预测过去,实际部署却无法获得这种信息。可按时间划分训练、验证和测试,并采用滚动方式观察稳定性。
冻结选择再测试
模型结构、特征和超参数在训练与验证阶段确定。最终测试集应保持独立;如果根据测试结果反复修改,它就不再是未见数据。
报告完整记录
记录样本范围、比赛状态处理、预测时点、数据版本、概率指标、基线和分组结果。报告失败和缺失预测,避免只挑有利比赛。网站当前不展示未经核实的准确率或收益纪录。
教学示例
教学切分:较早两个赛季训练,随后半赛季验证,最后半赛季测试;滚动窗口只允许使用每个预测时点之前的数据。具体时间跨度取决于实际样本,不是固定最优方案。
一个常见误区
赛后补齐的数据库不等于赛前就已拥有的数据,回测必须重建可获得时间。