kanhatakeyama/SyntheticTextWikiTranslate download history

kanhatakeyama/SyntheticTextWikiTranslate is a dataset on the Hugging Face Hub. In the last 30 days it was downloaded 40 times (11 in the last 7 days), and 1,123 times in total. It ranks #219,113 among datasets by monthly downloads.

以下のデータ源からランダムに抽出した日本語のテキストをPhi-3で再生成し､更に自動英訳したコーパスです｡ Wikibooks Wikipedia コード こちら 一部の計算には東京工業大学のスーパーコンピュータTSUBAME4.0を利用しました｡ データ parquetファイルが数十GB程度あります datasetsライブラリからでは､はじめの数GB程度しか読み込めない可能性があります｡git lfsなどでダウンロードする必要がありそうです｡

Open kanhatakeyama/SyntheticTextWikiTranslate on Hugging Face