bloom_tuning
bloom_tuning copied to clipboard
如果想要进行多轮对话,要用什么样的对话模板呢
多轮对话可以参考 fastchat 项目里的训练代码: https://github.com/lm-sys/FastChat/blob/main/fastchat/train/train.py
可参考最近开源的项目:https://github.com/zejunwang1/LLMTuner 多轮对话数据输入形式、支持全量参数、LoRA 和 QLoRA 微调