ohtaman/oscar_ja_clean_filtered download history

ohtaman/oscar_ja_clean_filtered is a dataset on the Hugging Face Hub. In the last 30 days it was downloaded 64 times (48 in the last 7 days), and 1,396 times in total. It ranks #188,790 among datasets by monthly downloads.

oscar データセットに対して、基本的なクレンジングを施した上で、 tatoeba および青空文庫(新字新仮名の児童向け作品) で学習した kenlm の perprexity でフィルタリングしたものです

Open ohtaman/oscar_ja_clean_filtered on Hugging Face

Sister project: Paper Pulse, the upvote history of every Hugging Face Daily Paper.