Wenming Tu issues

Results 4 issues of


                                            Wenming Tu

请问对Qwen-VL-Chat微调所需要的”图文对“数据量大概需要多少？目前进行lora微调效果不大

尝试在**5000**条左右的_refcoco_的test数据集上进行微调，发现效果不大，**precision只提高了1个百分点**，不知道是为什么？除了在Image Grounding任务上进行微调，还在Image Caption任务上进行微调，性能提升都不大，不知道有什么建议？？？😭 使用的脚本也是官方提供的微调脚本以及遵循输入格式的要求。

请问QWen-VL-Chat模型进行训练的损失函数接口在哪里呢？

您好，我们想使用QWen-VL-Chat进行一些训练，但是可能需要进行损失函数的修改之类的，不知道怎么修改呢，希望能提供一点建议，谢谢。

<box>这个token是否有特殊含义？

在`eval_mm/evaluate_grounding.py`文件中，关于prompt的设置，大致在170行左右, `prompt = '{}{}' ` 只有一个``，能够提示模型进行标框？

请问QwenVL支持多LoRA的切换吗？？

目前QwenVL支持加载微调后的lora，但是我们想尝试QwenVL的多LoRA切换，不知道有没有什么适配好的方法？