ArthurZhao

Results 2 comments of ArthurZhao

感谢回复,中文和英文分词使用相同的分词方式吗?英文每个字母是一个token,中文是每个字,当做一个token?例如下图中的两种方式使用哪种呢? ![image](https://user-images.githubusercontent.com/32949741/152944402-29fdae9c-fae8-4e34-8070-a352baf64c7f.png)

@Ultraman-Orb 你好请问ground truth中存在英文,这种你是怎么对其进行分词的呢?