ChatGLM-Tuning 为什么转换成{context:"",target:""}的格式？是哪里定义的吗？

为什么转换成{context:"",target:""}的格式？是哪里定义的吗？

Open ze00ro opened this issue 1 year ago • 3 comments

您好，感谢分享

原来alpaca的格式是 instruction,input,output, 为什么转换了context,target的格式呢？我看train的代码也没解析这个格式，是把这个格式直接train了么？为什么是这个格式呢？

我现在对finetune的格式一头雾水。

谢谢

Apr 18 '23 10:04 ze00ro

这个应该就是dict中pair的keys, 可以自己改的，不过很麻烦

Apr 19 '23 02:04 Skywalker-Harrison

因为chatglm只有两部分，输入和输出，key的名字可以顺便改，对应的处理流程修改下就可以

Apr 20 '23 11:04 mymusise

您好，感谢分享

原来alpaca的格式是 instruction,input,output, 为什么转换了context,target的格式呢？我看train的代码也没解析这个格式，是把这个格式直接train了么？为什么是这个格式呢？

我现在对finetune的格式一头雾水。

谢谢

因为在convertxxxxxx的那个py里面定义了，把json转成jsonl格式

Sep 06 '23 13:09 zzy347964399