atsuhiro-me https://blog.hatena.ne.jp/atsuhiro-me/ みーのぺーじ https://pc.atsuhiro-me.net/ 機械学習 機械学習では，たくさんのデータを利用してモデルを学習させる手法なので，データを統計学的に適切に扱う必要があります． 機械学習では，モデルの訓練と評価に同じデータセットを使用してはいけないという原則があります．モデルは単純にデータセットを丸暗記しているだけかもしれないので，未知のデータを適切に扱えない可能性があるためです．モデルを検証するための未使用データを用意する必要があります． 検証データを使用してモデルの性能を計測しながらハイパーパラメータを調整すると，検証データに対しても過学習する可能性があります．そこで，最終的なモデルの性能を評価するための未使用データを用意する必要があります． これら… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fpc.atsuhiro-me.net%2Fentry%2F2023%2F10%2F03%2F000226" title="機械学習における訓練・検証・試験データの分割 - みーのぺーじ" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2023-10-03 00:02:26 rich https://pc.atsuhiro-me.net/entry/2023/10/03/000226 1.0 100%