CLUEPretrainedModels icon indicating copy to clipboard operation
CLUEPretrainedModels copied to clipboard

关于RoBERTa pair的预训数据构造形式

Open songt96 opened this issue 4 years ago • 1 comments

您好: 1、RoBERTa pair的预训数据的构造形式是什么样的?和普通的RoBERTa有什么差别? 2、后续会开放在clue vocab上预训练的,base版的BERT及RoBERTa模型权重吗? 谢谢!

songt96 avatar Apr 16 '20 04:04 songt96

同问

zhanlaoban avatar May 14 '20 12:05 zhanlaoban