2024-05-29

anond:20240529163303

バリデーションとテストと分けたところで、ホールドアウト分割だろ?

交差検証してもホールドアウト分割だろ?

記事への反応 -
  • だからバリデーションと分けるんだけど 謎のテストデータがどこかにあったら一回しか使えないだろ

    • コンペみたいにリーダーボードで評価するようにするんだよ、知らんのか? テストデータを「1回しか利用できない」なんてことはなく、ラベルを開発者にバラさなければいい

      • だからそれで評価されるまで性能上げてったらオーバーフィッティングやろ まして100パーセントの上司だろ?

        • だから期限と一日あたりのモデル送信数にを設けるんだよ それを超えたらテストデータ自体を更新する どちらにせよ、ホールドアウト分割よりは過学習を防げる

          • あー クロスバリデーションでバリデーションセットとテストセットの話なんだよね バリデーションとテストってさんざ言ってるんだから知ってればわかると思うけど

            • バリデーションとテストと分けたところで、ホールドアウト分割だろ? 交差検証してもホールドアウト分割だろ?

              • k fold cross validationとholdoutは違いますね

                • わかってないのはお前だろ ホールドアウト分割を繰り返してるんだよ交差検証ってのは テストデータのブラックボックステストってのはそれとは別で、マニュアルでアノテーションして...

                • はい、交差検証法はホールドアウト分割を繰り返し行う手法です。 ## 交差検証法の手順 1. データセットを複数のフォールド(部分集合)に分割する。[1][2] 2. 1つのフォールドをテストデ...

                • ルー大柴になればイキれると思ったの?

記事への反応(ブックマークコメント)

ログイン ユーザー登録
ようこそ ゲスト さん