5 如果将交叉验证用于模型/功能选择,则需要牢记的是,可能会过度拟合交叉验证统计信息并最终导致性能较差的模型以及优化的交叉验证统计信息可能是非常乐观的效果估算。这样的效果可能会令人惊讶地大。有关功能选择设置的示例,请参见Ambroise和McLachlan;有关模型选择设置的示例,请参见Cawley和Talbot。 — 迪克兰有袋动物 source 值得一提的是,但应该重复地说,这些都是滥用或过度信任简历的例子,而不是方法本身的某些缺点。 1 确实,但是,这是一种经常被滥用的方式-因此,在学习交叉验证时务必要意识到这一点!更多的交叉验证通常是一个很好的解决方案,即嵌套交叉验证,或者如Stone所说的那样“双重交叉”验证。该问题几乎影响到为获得模型而进行了优化的任何功能或模型选择标准。从这个意义上讲,交叉验证没有什么特别的。 — Dikran有袋动物2011年