helloworld01001

你好！我进行了OPENAI_API_KEY的配置，整体上是比未设置API的结果要高，但是还是不能完全达到排行榜上的结果，虽然已经很接近了。还有一个问题是黄色的那几个VQA的benchmark不知道为什么不能进行OPENAI_API_KEY进行评测，没有下面这些提示，前面那几个benchmaek是有这些提示的。   ChatAPI - INFO - Using API Base: https://api.openai.com/v1/chat/completions; API Key: （我的api） Hello! How can I assist you today? 2024-09-04 05:36:05,869 - RUN - INFO - The evaluation...

> > 你好！我在复现llava-v1.5-7b时的评测结果达不到排行榜上的结果，很多数据集都会差几个百分点，请问llava-v1.5-7b复现还需要设置什么参数吗？我把这个模型下载下来了liuhaotian/llava-v1.5-7b，然后把它替换vlmeval/config.py 中llava-v1.5-7b的模型地址。这是我的脚本 CUDA_VISIBLE_DEVICES=1,2 python /VLMEvalKit/run.py --data MMBench_DEV_EN --model llava_v1.5_7b --verbose  > > 你好，请问你就只修改了vlmeval/config.py 中llava-v1.5-7b中的模型地址吗，我这样操作后run没有任何反应，下完数据集后就结束了，请问你还做了其他什么操作吗 是的，我只修改了模型的地址，llava需要根据要求配置在/VLMEvalKit目录下