entity_extractor_by_ner icon indicating copy to clipboard operation
entity_extractor_by_ner copied to clipboard

Published 20 hours ago • verified publisher icon stanleylsx

无法生成lab2id和token2id两个文件

Open bigenheng opened this issue 1 year ago • 3 comments

Snipaste_2024-05-10_21-19-22

bigenheng avatar May 10 '24 13:05 bigenheng

你好，请问这个如何解决呢？

bigenheng avatar May 10 '24 13:05 bigenheng

同问，我没有生成token2id

M-YoungBWeN avatar Jun 19 '24 13:06 M-YoungBWeN

0001 在训练时使用预训练模型就不会生成token2id文件，那么预测时该使用哪个词表呢

M-YoungBWeN avatar Jun 22 '24 01:06 M-YoungBWeN

0001 在训练时使用预训练模型就不会生成token2id文件，那么预测时该使用哪个词表呢

预训练模型本身自己带有tokenizer，不需要生成token2id文件了。

stanleylsx avatar Sep 02 '24 06:09 stanleylsx