Qwen2-VL-2B-Instruct与榜单结果对不齐

[helloworld01001]

你好！请问为什么我测的Qwen2-VL-2B-Instruct与榜单上的结果差了那么多，Qwen2-VL需要哪些额外的配置吗，transformers我用的也是最新的：git+https://github.com/huggingface/transformers.git。

我在测试Qwen2-VL-2B-Instruct时显示了这个，请问会有影响吗，代码可以正常运行。 Unrecognized keys in rope_scaling for 'rope_type'='default': {'mrope_section'} Unrecognized keys in rope_scaling for 'rope_type'='default': {'mrope_section'} Unrecognized keys in rope_scaling for 'rope_type'='default': {'mrope_section'}

[FangXinyu-0913]

hi @helloworld01001. transformers版本请参照Qwen-VL-2官方设定 pip install git+https://github.com/huggingface/transformers@21fac7abba2a37fae86106f87fcf9974fd1e3830 accelerate 你测试时显示的这一问题可能是transformers版本不对应导致的，我测试时暂未遇见该报错。

[kennymckormick]

Please follow the comment of @FangXinyu-0913 and use the corresponding transformer commit for evaluation.