tohoku-nlp/nanochat-jp-eval-bundle download history

tohoku-nlp/nanochat-jp-eval-bundle is a multiple choice dataset on the Hugging Face Hub. In the last 30 days it was downloaded 64 times (19 in the last 7 days), and 250 times in total. It ranks #214,797 among datasets by monthly downloads.

nanochat-jp-eval-bundle nanochat の日本語フォーク nanochat-jp で使用する 日本語評価データ一式(eval bundle) です. 既存の公開日本語ベンチマークを nanochat の評価コードがそのまま読める形式へ変換し,設定ファイルとあわせて配布しています. 評価は2系統あります. CORE: ベースモデル(事前学習直後)向け.few-shot の尤度比較(multiple choice)または継続生成(language modeling)で採点します.対象タスクと shot 数は core.yaml で定義されま

Open tohoku-nlp/nanochat-jp-eval-bundle on Hugging Face

Sister project: Paper Pulse, the upvote history of every Hugging Face Daily Paper.