Yaoyu

Results 17 comments of Yaoyu

你好 在微调过程中,验证集的loss一在上升??不知道咋回事

你好,微调m3e系列的模型数据量有建议吗?还是多少都行呢?我试了很多,都是验证集的loss一在上升。很疑惑是不是数据量出问题了

好的,感谢,不会啊 ,数据都是公开发布的领域数据。对了,我看代码里面没有test data ,只有train和valid 数据集,为啥啊??我的数据有train和valid,test,我可以合并train 和valid,,把test当作vaild吗?

试了好多次,weight_decay 调到0.1了 ,还是几个epoch(2-3个),valid和train上的loss差就 开始变大 ,太困惑了

![le-3](https://github.com/wangyuxinwhy/uniem/assets/96362397/778a9add-956b-40a0-9587-1091b2323958) 类似这种情况呢?一定要达到平稳的转态吗?我思考了一下,模型都会拟合,是要达到怎么样的趋势才算微调成功了啊?

方便加一个微信吗?私聊一下,法律文本相关的数据

您好 数据链接:https://github.com/china-ai-law-challenge/CAIL2019/tree/master/scm