IncreProtoNet

IncreProtoNet copied to clipboard

BERT结果不对应

6

你好，我这边复现的下论文结果，但是发现，BERT的1shot和5shot，跑不出论文的效果，请问是参数不对么，还是其他原因呢？（其他都可以） 我跑的是： 1 shot base | novel | both 80.12 | 60.06| 78.42 5 shot base | novel | both 78.53 | 73.65| 78.11

yzhihao

复现论文结果问题

2

您好，我尝试了很多次都无法复现出论文的结果，请问可不可以提供一下能够复现出论文结果的参数？感激不尽！

icoderzqliu

代码中为什么没有测试阶段

4

请问为什么代码中直接拿测试数据集来做验证？验证集似乎没有使用到。请问可以解释一下一下处理分割好的数据集分别都是用在哪个阶段嘛？谢谢！

icoderzqliu

实验数据问题

1

请问如何得到论文中Proto、HATT-Proto、BERT-PAIR等这些Few-shot模型的结果，是在训练阶段保留了base relation的原型吗？ 另外，我在复现BERT 5-shot时发现，base acc越来越高，但是novel acc却越来越低了，虽然both acc达到了论文中的结果，但是novel acc 却远低于论文结果，请问如何改善呢？参数基本都是代码中的默认参数。

icoderzqliu

在PrototypeGenerator.py: line 60 与 line 65同时出现i，导致死循环

SwaggyZhang