ChatGLM-Efficient-Tuning
ChatGLM-Efficient-Tuning copied to clipboard
自定义rejected部分数据集生成有什么好的方法推荐吗
目前能想到的可以批量出rejected的方法: 1.采用较差的模型生成的anwser作为rejected 2.anwser部分数据集提取摘要作为rejected
想问下你们的rejected部分数据集是怎么生成的,谢谢