ks-pf/JMTEB-fixed download history
ks-pf/JMTEB-fixed is a text classification dataset on the Hugging Face Hub. In the last 30 days it was downloaded 393 times (233 in the last 7 days), and 5,321 times in total. It ranks #39,920 among datasets by monthly downloads.
JMTEB-fixed このリポジトリは元のJMTEBデータセットのUTF-8エンコーディングエラーを修正したバージョンです。 修正内容 問題 NLP Journal LaTeXコーパスの一部ファイル（例: V28N02-25.tex）が異なるエンコーディング（Shift-JIS、EUC-JPなど）で保存されており、UTF-8デコーディングエラーが発生していました。 解決策 retrieval.pyのNLPJournalHelper.load_txtメソッドを修正し、複数のエンコーディングを順次試行するよう