yyqi17
Results
1
issues of
yyqi17
在基于chatflow模型用lora精调时,遇到了生成结果乱码的问题,猜测是由于tokenizer没有选择bpe导致的。但选用bpe tokenizer需要merge.txt预训练文件,想问一下这里我们在预训练时是怎样设置的?Linly-OpenLLaMA还需要bpe tokenizer吗?