wangyin717

Results 2 comments of wangyin717

> 使用video_llama_eval.yaml和demo_video.py,配置如下: ckpt:finetune-billa7b-zh.pth > > llama_proj_model:pretrained_minigpt4.pth llama_model:Neutralzz/BiLLa-7B-LLM > > 报错如下图: 请问解决了吗?我现在也有这个问题

这是我的sft.yaml配置文件,在这里我尝试用单卡A100训练,所以改了run下面的参数,训练运行 ```CUDA_VISIBLE_DEVICES=0 python train.py --cfg-path lavis/projects/pp_qwen7b_video/sft.yaml ``` 然后会出现上述Missing keys的问题,最后会报错显存不足(单张A100肯定显存不够)。此外model.pth权重检查过应该没问题,所以Missing keys按理说不应该出现。 sft.yaml: ``` model: arch: minigpt4qwen model_type: qwen7b_chat load_finetuned: True load_pretrained: True # pretrained: "https://storage.googleapis.com/sfr-vision-language-research/LAVIS/models/InstructBLIP/blip2_pretrained_flant5xxl.pth" pretrained: "/data/MiniGPT4Qwen/cache/ckpt/blip2/blip2_pretrained_flant5xxl.pth" # finetuned: "" finetuned:...