jhflow/orca-gugugo-ko-dedup download history

jhflow/orca-gugugo-ko-dedup is a dataset on the Hugging Face Hub. In the last 30 days it was downloaded 11 times (3 in the last 7 days), and 624 times in total. It ranks #540,266 among datasets by monthly downloads.

squarelike/OpenOrca-gugugo-ko 데이터셋에서 gpt4 생성 분량만 추출하였습니다. 번역 태스크를 제거하였습니다. 이때 단순히 "question"과 "response" 컬럼에 "번역" 이라는 단어가 존재하는 경우 해당 샘플을 제거하였습니다. 따라서 완벽히 제거되지 않았을 수 있습니다. NearDeDup 알고리즘 적용 To do ICL 기반, 번역 태스크 Classification 및 번역 샘플 2차 필터링 Original Dataset : squarelike/OpenOrca-gugu

Open jhflow/orca-gugugo-ko-dedup on Hugging Face

Sister project: Paper Pulse, the upvote history of every Hugging Face Daily Paper.