opencompass icon indicating copy to clipboard operation
opencompass copied to clipboard

[Bug] commonsenseqa_gen 数据集测试时,显示OSError: We couldn't connect to 'https://huggingface.co' to load this file

Open FlexLaughing opened this issue 6 months ago • 1 comments

先决条件

  • [X] 我已经搜索过 问题讨论 但未得到预期的帮助。
  • [X] 错误在 最新版本 中尚未被修复。

问题类型

我正在使用官方支持的任务/模型/数据集进行评估。

环境

--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug

其他的数据集正常

重现问题 - 代码/配置示例

--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug

其他的数据集正常

重现问题 - 命令或脚本

--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug

其他的数据集正常

重现问题 - 错误信息

--datasets commonsenseqa_gen --hf-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-path llm_mode_debug/Meta-Llama-3.1-8B-Instruct/ --tokenizer-kwargs padding_side='left' truncation='left' trust_remote_code=True --model-kwargs trust_remote_code=True device_map='cpu' --max-seq-len 1024 --max-out-len 16 --batch-size 1 --num-gpus 0 --debug

其他的数据集正常

其他信息

No response

FlexLaughing avatar Aug 07 '24 07:08 FlexLaughing