JacquelineXu

遇到了同样的问题...脚本如下 > python run.py --datasets ceval_gen --hf-path /data/ptm/internlm2-chat-1_8b --tokenizer-path /data/ptm/internlm2-chat-1_8b --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='auto' --max-seq-len 1024 --max-out-len 16 --batch-size 2 --num-gpus 1 --debug --- 然后仔细研究报错发现huggingface_above_v4_33.py这个部分很神奇 打印了下opencompass/opencompass/tasks/openicl_infer.py里面73行的model_cfg，发现里面的type是opencompass.models.huggingface_above_v4_33.HuggingFacewithChatTemplate，不太理解为啥不是我指定的internlm2-chat-1_8b对应的模型 ---...

可以通过huggingface下到数据： https://huggingface.co/datasets/hails/agieval-jec-qa-kd https://huggingface.co/datasets/hails/agieval-jec-qa-ca 里面的数据是parquet格式的，用from pandas import read_parquet来解析就行