lorinma/BookBasedQAGen_Petrochemical download history

lorinma/BookBasedQAGen_Petrochemical is a question answering dataset on the Hugging Face Hub. In the last 30 days it was downloaded 52 times (8 in the last 7 days), and 1,067 times in total. It ranks #180,833 among datasets by monthly downloads.

如果你有领域相关的一些文本材料（可以是OCR出来还比较脏的数据），想转化成单轮 alpaca 形式的的QA对，这是一个简易的教程。也就图一乐，因为真正高质量的领域QA还是得来自于行业专家，并且向LLM注入领域知识应该通过pretrain而不是SFT也已经是共识了。 bookgen文件夹中包含了样例文本和py文件，注意prompt根据领域调整一下，即使原始语料比较脏LLM也基本可以理解。并没有核查过会不会出现幻觉现象。 只要是和OpenAI SDK兼容的API服务都可以平滑迁移。这里使用了零一万物的yi-large API。https://platform.lingyiwanwu.com/ 20

Open lorinma/BookBasedQAGen_Petrochemical on Hugging Face

Sister project: Paper Pulse, the upvote history of every Hugging Face Daily Paper.