评测时为什么只看类别，不看位置？？

Open XuJianzhi opened this issue 4 years ago • 2 comments

score.py文件中，不看位置不就成了多标签分类了吗？

https://github.com/CLUEbenchmark/CLUENER2020/blob/master/score.py

Mar 24 '21 04:03 XuJianzhi

https://github.com/CLUEbenchmark/CLUENER2020/tree/master/pytorch_version 中所述 “在dev上为F1分数为0.8076”，是用的这个（https://github.com/CLUEbenchmark/CLUENER2020/blob/master/score.py）评价代码吗？

上面说的到评价代码中根本没有考虑到位置信息，如果是这样测出来的，那你的指标“虚高”

Dec 14 '21 09:12 camel2000

score.py文件中，不看位置不就成了多标签分类了吗？

https://github.com/CLUEbenchmark/CLUENER2020/blob/master/score.py

这个问题解决了吗？你跑baseline 跑的指标是多少啊？ readme 里面写的指标是错误的吗？

Dec 14 '21 09:12 camel2000