Jay Lu
Jay Lu
RuntimeError: The size of tensor a (39) must match the size of tensor b (34) at non-singleton dimension 1 全是中文时,能正常分词  句子中加入英文单词后就报错  use_dict改成False后也能正常分词 
### System Info / 系統信息 vllm==0.8.5.dev92+g5c9121203.precompiled transformers==4.51.3 ### Who can help? / 谁可以帮助到您? _No response_ ### Information / 问题信息 - [ ] The official example scripts / 官方的示例脚本 - [...