SolarKnight

Results 9 comments of


                                            SolarKnight

如何在领域数据上二次预训练

cy

[Feature] <title>请问如果我想像GLM那样直接对一篇文章做训练，而不是prompt的方式，应该怎么做？

cy

[BUG/Help] <title>是否可以复用ChatGLM-6B的方式做微调？性能如何？

cy

微调chatglm2后进行预测出现大量复读现象

我也这样了，cy

[BUG/Help] <title>bash train.sh出错，AttributeError: 'Seq2SeqTrainer' object has no attribute 'is_deepspeed_enabled'

> 就是transformers版本问题，你用4.27.1 他不是要求的4.30.2吗，这改回去没事吗

[BUG/Help] <title>bash train.sh出错，AttributeError: 'Seq2SeqTrainer' object has no attribute 'is_deepspeed_enabled'

> 请问： ptuning需要单卡多少显存啊，24g够不够 fp16得我这只用了22多点G

[BUG] 在提问时会只出现一个字，就停了

> 您需要给出详细的日志，可以在config/basicconfig中打开显示全部日志，参数修改为True Batches: 100%|█████████████████████████████████████████████████████████████| 1/1 [00:00

报错“KeyError: 'transformer.embedding'”

closed里有个说这个的

base模型

你已经用上了？