早期終了

早期終了とは、検証データの誤差が悪化し始めた時点で学習を打ち切り、過学習を防ぐ手法です。アーリーストッピングとも呼ばれます。

学習を続けると訓練データの誤差は下がり続けますが、検証データの誤差はある時点から逆に上がり始めます。この折り返し点で止めるのが狙いです。

実装が簡単で効果も大きいため、正則化の手段として広く使われています。「いつやめるか」も学習の重要な設計だといえます。