PromptCLUE icon indicating copy to clipboard operation
PromptCLUE copied to clipboard
verified publisher icon clue-ai

pCLUE数据集只有5类标签，与PromptCLUE中的16类任务对应不上

Open plmsmile opened this issue 2 years ago • 5 comments

pCLUE 测试数据集 仅5类。以下是pCLUE_test_public.json classify 57354 mrc 40624 nli 25515 generate 5091 anaphora_resolution 972

PromptCLUE 有16个任务。数据集和任务无法一一对应。 image

plmsmile avatar Apr 13 '23 03:04 plmsmile

pCLUE只是开源数据集，用于pCLUE榜单 promptCLUE是开源模型，不止这个数据集

joytianya avatar Apr 13 '23 03:04 joytianya

soga谢谢大佬。那PromptCLUE榜单里的完整评测数据集，会开源不，或者除了pCLUE里的还有哪些呀？

plmsmile avatar Apr 17 '23 06:04 plmsmile

完整评测数据集就是pCLUE 测试数据集 你说的是promptCLUE训练集？这个后续会陆续开源

joytianya avatar Apr 17 '23 07:04 joytianya

pCLUE只是开源数据集，用于pCLUE榜单 promptCLUE是开源模型，不止这个数据集

作者您好，我想在 promptCLUE是开源模型的基础上继续训练自己的文本改写数据，请问您在prompt过程中，改写数据集的格式是什么样的呢

leiqing110 avatar Apr 18 '23 09:04 leiqing110

可以参考推理的示例哈，见readme

joytianya avatar Apr 18 '23 09:04 joytianya