opencompass
opencompass copied to clipboard
[Bug] commonsenseqa_gen 数据集测试时,显示OSError: We couldn't connect to 'https://huggingface.co' to load this file
先决条件
问题类型
我正在使用官方支持的任务/模型/数据集进行评估。
环境
--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug
其他的数据集正常
重现问题 - 代码/配置示例
--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug
其他的数据集正常
重现问题 - 命令或脚本
--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug
其他的数据集正常
重现问题 - 错误信息
--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug
其他的数据集正常
其他信息
No response