UER-py
UER-py copied to clipboard
请教下有gpt2的微调的相关文档么?
hi大佬 gpt2-chinese,我看了,但是没有相关微调的代码,在此看到了如下代码,但是数据格式没有告知,也不知道是不是纯文本,
python3 preprocess.py --corpus_path corpora/cluecorpussmall.txt \
--vocab_path models/google_zh_vocab.txt \
--dataset_path cluecorpussmall_lm_seq128_dataset.pt \
--seq_length 128 --processes_num 32 --data_processor lm
请教下这个是微调的代码么?
请问你解决了吗
同问,没有格式,不知道怎么准备语料