jw8023wh

Results 1 issues of jw8023wh

在拜读大神的文章和代码,对于tokenizer这里有些不解。 常规的tokenizer可以得到input_ids, 您的代码里的tokenizer可以同时得到input_ids和pinyin_ids,感觉很是神奇, 可否开源您训练tokenizer的代码呀