minimind icon indicating copy to clipboard operation
minimind copied to clipboard

Published 20 hours ago • verified publisher icon jingyaogong

SFT数据集预处理方法

Open SimingYan opened this issue 5 days ago • 1 comments

非常感谢您之前关于预训练数据集预处理的分享，想请问一下是否也可以分享一下SFT阶段的数据预处理脚本，希望能够基于匠数SFT数据集复现出sft_512.jsonl，非常感谢！

SimingYan avatar Feb 22 '25 01:02 SimingYan