bloom_tuning icon indicating copy to clipboard operation
bloom_tuning copied to clipboard

如果想要进行多轮对话,要用什么样的对话模板呢

Open xxxxuee opened this issue 2 years ago • 2 comments

xxxxuee avatar May 31 '23 08:05 xxxxuee

多轮对话可以参考 fastchat 项目里的训练代码: https://github.com/lm-sys/FastChat/blob/main/fastchat/train/train.py

zejunwang1 avatar May 31 '23 09:05 zejunwang1

可参考最近开源的项目:https://github.com/zejunwang1/LLMTuner 多轮对话数据输入形式、支持全量参数、LoRA 和 QLoRA 微调

zejunwang1 avatar Jun 20 '23 09:06 zejunwang1