ホールドアウト法・k-分割交差検証

「覚えさせたデータで試して全部正解は、答えを見ながらのテスト。1回だけ分けるホールドアウト法と、分け方を変えて何回も試すk-分割交差検証」　4ページ　2026-10-26

AIに注文メールの仕分けを覚えさせ、覚えさせたデータで試したら全部正解。でもそれは答えを見ながらテストしたのと同じで、覚えさせていないデータで試さないと本当の実力は分からない。手元のデータは学習用とテスト用に分ける。1回だけ分けて1回だけテストするのがホールドアウト法（例: 8割で学習、2割でテスト）。分け方を変えて何回も試すのがk-分割交差検証（クロスバリデーション）で、5個に分けたらテスト用を順番に入れ替えて5回試して平均する。データが多く手早く試すならホールドアウト、データが少なく結果を安定させたいならk-分割。ひっかけは「日付のあるデータは混ぜずに古い方で学習、新しい方でテスト」「テスト用のデータは学習に使わない」「kは分ける数＝試す回数」。全4ページ。