ChatGLM-Efficient-Tuning icon indicating copy to clipboard operation
ChatGLM-Efficient-Tuning copied to clipboard

Published 20 hours ago • verified publisher icon hiyouga

应该是cli_demo.py有点问题

Open LiZhangMing opened this issue 1 year ago • 3 comments

现象描述

我的训练集现在只是有一条数据，就是who are you。我将它训练了120轮，并且在执行预测的时候表现如下 image

然后执行 python src/cli_demo.py --checkpoint_dir examples/new_path_one/checkpoint-80/ 这个代码

image 然后他的回答和预测的时候完全不一样。

这个是终端的回答 image

这个是他的预测 image

LiZhangMing avatar Jun 28 '23 13:06 LiZhangMing

我在本地复现了修改自我认知的实验，在 ChatGLM-6B 和 ChatGLM2-6B 上均通过了验证，请参考本项目提供的案例。

hiyouga avatar Jun 28 '23 14:06 hiyouga

我在本地复现了修改自我认知的实验，在 ChatGLM-6B 和 ChatGLM2-6B 上均通过了验证，请参考本项目提供的案例。

我是按照您给的案例操作的，将example_dataset拷贝了一份出来，然后改了下。结果就是我上面发现的问题

image

LiZhangMing avatar Jun 29 '23 01:06 LiZhangMing

cli 预测可能有随机性，多试几次

hiyouga avatar Jun 29 '23 04:06 hiyouga