pycorrector icon indicating copy to clipboard operation
pycorrector copied to clipboard

gpt纠错模型的评估结果和展示不一致?

Open muzhi1991 opened this issue 1 year ago • 0 comments

您好,我在执行python evaluate_models.py --model chatglm想要复现你在README里面的评估结果都时候发现执行的结果好像不太一一致,差距还挺大,请问是什么原因呢?

我的执行结果如下 Sentence Level: acc:0.2627, precision:0.2472, recall:0.2413, f1:0.2442, cost time:131.01 s, total num: 1100

看代码里面用的模型是chatglm3-6b和一个您训练的lora,都是用的库里的,没有修改

muzhi1991 avatar Jan 31 '24 10:01 muzhi1991