Logan Zou
Logan Zou
> train.sh中加一个参数--ptuning_checkpoint "output/insurance-chatglm-6b-pt-512-2e-2/checkpoint-20" 想请问您一下,通过这种方法是否遇到继续微调loss不下降的情况?我这边使用checkpoint继续微调就会出现loss不下降,训练没有效果的情况
> @logan-zou 建议将这部分的文档介绍部分移动到docs下面的第四章 emmm是说将 markdown 文档放到 docs 下面?
这确实是一个值得探究的问题,在书写这一部分时,我首先是直接使用了英文 Prompt 翻译成的中文 Prompt,GPT 给的结果是错误的,但是将 Prompt 修改成现在教程中的 Prompt 之后,运行 GPT 给的结果是正确的(如教程中的输出);但是根据你的截图,直接运行这个 Prompt,GPT 给的结果又是错误的了,可能涉及到历史提问的对比,值得深入探究一下其背后原因
> 建议使用英文来书写Prompt,模型更容易理解,中文有些词的意思太广了,不能保证模型理解是否正确。 感觉这个并不只是中文词义更广的问题,可能也涉及到中英文理解能力不同或其他更多的因素;因为综合考虑到 Prompt 准确性和学习门槛,我们选择了双语的 Prompt,对于不太准确的中文 Prompt,欢迎大家提出意见以改进~
收到反馈,非常感谢意见~不过目前我们对Agent的翻译一般都是普遍翻译为代理,之后我们会讨论一下相关情况,然后给出反馈修改,非常感谢~
可以的,欢迎有需求有兴趣的小伙伴进群讨论学习~
抱歉,我们没有复现这个 bug
同意