Bias Variance Tradeoff

  统计学习中有一个重要概念叫做residual sum-of-squares

  RSS看起来是一个非常合理的统计模型优化目标。但是考虑k-NN的例子,在最近邻的情况下(k=1),RSS=0,是不是k-NN就是一个完美的模型了呢,显然不是k-NN有很多明显的问题,比如对训练数据量的要求很大,很容易[……]

阅读全文