hotchpotch/msmarco-ja-hard-negatives download history

hotchpotch/msmarco-ja-hard-negatives is a dataset on the Hugging Face Hub. In the last 30 days it was downloaded 194 times (19 in the last 7 days), and 2,184 times in total. It ranks #69,195 among datasets by monthly downloads.

msmarco-ja-hard-negatives hpprc/msmarco-ja で公開されているMS MARCOの日本語翻訳データに、以下の処理を加えたハードネガティブマイニングをしたものです。また、後段タスクとして、情報検索モデルのSPLADEを学習させたモデルで mMARCO との比較を行いました。 データの処理 翻訳データの正規化、フィルタと選択 正規化 ユニコード正規化 (NFKC) dataset(query) のフィルタ・選択 dataset-sim のコサイン類似度が0.98以上のものはほぼ同一のケース

Open hotchpotch/msmarco-ja-hard-negatives on Hugging Face

Sister project: Paper Pulse, the upvote history of every Hugging Face Daily Paper.