pytorch_bert_intent_classification_and_slot_filling
pytorch_bert_intent_classification_and_slot_filling copied to clipboard
基于pytorch的中文意图识别和槽位填充
首先感谢您的工程。我有一个问题,我在做实体识别时,如果故意输入完全不应该识别到实体的文字(如输入xxxxkkdkdd),此时还是会识别到某个实体,这样就会导致无法信任推理结果。因此是否有能引入实体识别置信度,根据置信度来决定此次识别的准确度
关于数据集
您好,我想问一下这个模型的数据集时公用数据集吗? 还是自建数据集
如题,请问这个文件怎么获得
这部分[代码](https://github.com/taishan1994/pytorch_bert_intent_classification_and_slot_filling/blob/3ed54419e186496216d7150b5e9d1ac2aa748256/preprocess.py#L70)是不是漏了截断的操作,否则会超过设定的max_len,在进行Dataloader时会报错。
谢谢博主~
如果一句话长度大于100字,用这段程序是否可以进行slot filling任务? 是否只需要改动config文件中的max_len变量
OSError: Can't load tokenizer for '../../model_hub/chinese-bert-wwm-ext/'. Make sure that: - '../../model_hub/chinese-bert-wwm-ext/' is a correct model identifier listed on 'https://huggingface.co/models' - or '../../model_hub/chinese-bert-wwm-ext/' is the correct path to a directory containing...