yingxi
yingxi
有大佬有全的pretrain的图片吗,求分享
I have the same problem
I've the same problem.
> > > 另外我打算把预训练用的两个Wukong-OCR和LaionCOCO-OCR开源了,就是这两个都特别大,整理和上传到HF还需要一些时间。 > > > > > > 你好,看到huggingface上有这俩数据集,但是都是空的,是还在上传中吗,预计多久可以上传完成呢?谢谢 > > 因为人手不足还没开始传,应该会在国庆假期的时候传完。 问下这两个OCR的数据什么时候可以开源呀
嗯,我理解的增量预训练是基于stage1的结果继续训MLP,然后再微调。现在是说直接基于微调后的ckpt,先训MLP,再微调吗,这两种方式差异大吗。