2018-02-10

仕事における過学習リスク

仕事では、実際に経験したことを今後の意思決定の肥やしにすることが非常に重要になる。「反省から学ぶ」とか「PDCA」とか、そういった話だ。

なので、まずは「やってみて、その結果から学ぶ」という経験アプローチのが仕事の第一ステップとなることは殆ど間違いないだろう。

他方で、そういった経験アプローチは、実は万能ではない。

言い換えると、経験アプローチには留意点があって、その留意点を自覚できていないと、経験から学び「過ぎ」になり、逆にパフォーマンスが下がりうる

それを一言で言うと「過学習」「過剰適合」なのだが、本稿ではそのことについて書き散らしてみたい。

統計っぽく言ったサマリーは、回帰分析でパラメーターを増やすことのリスクは、日常の意思決定にも通じるものがあるという話。

なお、関連記事はこちら →リンク