helloworld01001

Qwen2-VL-2B-Instruct与榜单结果对不齐

1

你好！请问为什么我测的Qwen2-VL-2B-Instruct与榜单上的结果差了那么多，Qwen2-VL需要哪些额外的配置吗，transformers我用的也是最新的：git+https://github.com/huggingface/transformers.git。  我在测试Qwen2-VL-2B-Instruct时显示了这个，请问会有影响吗，代码可以正常运行。 Unrecognized keys in `rope_scaling` for 'rope_type'='default': {'mrope_section'} Unrecognized keys in `rope_scaling` for 'rope_type'='default': {'mrope_section'} Unrecognized keys in `rope_scaling` for 'rope_type'='default': {'mrope_section'} 

关于llava-v1.5-7b复现

15

你好！我在复现llava-v1.5-7b时的评测结果达不到排行榜上的结果，很多数据集都会差几个百分点，请问llava-v1.5-7b复现还需要设置什么参数吗？我把这个模型下载下来了liuhaotian/llava-v1.5-7b，然后把它替换vlmeval/config.py 中llava-v1.5-7b的模型地址。这是我的脚本 CUDA_VISIBLE_DEVICES=1,2 python /VLMEvalKit/run.py --data MMBench_DEV_EN --model llava_v1.5_7b --verbose