SpanNER
SpanNER copied to clipboard
对wnut17进行测试的时候出现如下bug
感觉原因是start、end不一定是这个origin_offset2token_eidx[end]词典的key,请问该怎么解决。
似乎是因为WNUT17数据集中存在一些特殊字符导致的,你可以将这一行样本打印出来,定位下特殊符号的位置。将这几个特殊字符去掉对结果不会有太大影响。
谢谢学长,确实是数据集的问题。重新处理了数据集就可以了。