生成video caption

Open mazhengyu8282 opened this issue 8 months ago • 1 comments

关于intervideo2 stage2,是否可以接入proj直接生成video caption,想要一个生成video caption的demo,此外readme中的群聊已满人，无法加入，能否设置新的群聊

Apr 16 '25 08:04 mazhengyu8282

stage2做主要做对比学习的，没有caption的loss，除非学习coca再接个text decoder head，不然没法生成video cap。生成video cap建议还是用stage 3或者我们videochat-flash或者internvideo2.5的工作，用mllm去做

Apr 29 '25 19:04 shepnerd