ストライク? ヒット? それともホームラン!?
ProbSpace_official
今回コンペティションで1位を獲得したOregin様より、Privateスコア:0.30777の提出ファイルについては、誤った修正を加えた学習データを用いているため、無効として欲しい旨の申告がございました。 本人に経緯を確認した上で該当データを削除し、正規のデータセットを用いた予測結果の中で、最もPrivateスコアが高くなる提出ファイルが採用されるよう対応しております(Privateスコア:0.25335)。 尚、今回の対応に伴い、順位の変動はございません。
【今回の経緯】 4/10(運営よりデータセットの再ダウンロード・修正依頼後): 公開手順をもとに、データセットを修正いただく対応を選択。
4/11~: 本来、totalPitchingCount=1の行をB=0, S=0と修正すべきところ、Out = 0と誤って修正していたことが判明。 以降のモデル構築については、運営より再公開されたデータセットに差し替える。
6/21(コンペ終了後): Out = 0と誤った修正を加えたデータセットを用いた構築モデルでの予測結果が最高精度(Privateスコア:0.30777)となり、また正規のデータセットへと差し替えた後の予測結果は最高で0.25335となることが判明。 → 運営に、経緯の説明及び、Privateスコアの変更依頼をいただきました。
【運営の対応】 下記理由より、チーティングの意図はなかったものと判断し、Privateスコア : 0.30777→0.25335となるよう変更対応いたしました。 1.修正対応に誤りのあったデータセットについて提供・経緯を説明いただき、ミスであったことを確認できたこと 2.最終提出ファイルを選択できない仕様であったため、Private LBで0.30777のファイルが選択されないよう防ぐことはできなかったこと
なお本件の背景としましては、 I. コンペリリース時のデータセットに誤りがあったこと II. システムの仕様上、最終提出ファイルを選択できなかったこと が根本原因にあり、皆さまにご迷惑おかけいたしましたことお詫び申し上げます。
また、II.につきましては、次回より最終提出ファイル選択式でのコンペティションへと変更となります。 引き続き同サービスにつきまして、どうぞよろしくお願いいたします。