Conditional Test Error
特定の訓練データセットTから学習したモデルが、新しいデータに対してどれくらい間違えるかを表す誤差。Err_T = E[L(Y^0, f(X^0))|T]と定義される。クロスバリデーションやブートストラップは条件付き誤差の推定には適しておらず、期待誤差(Err)を推定していることに注意が必要。
「この特定の訓練データTから学習したモデルへの条件付きテスト誤差Err_T」
「訓練セットTを固定したときの未知データに対する誤差。研究室ごとに異なる値を持つ」
「CVと条件付きテスト誤差の相関はほぼゼロ、わずかに負という驚くべき結果」