InternVL icon indicating copy to clipboard operation
InternVL copied to clipboard

关于InternVL3.5的Router training

Open JerryHUZY opened this issue 3 months ago • 7 comments

Router training是纯计算指标类型来确定路由的吗?是不是不包含参数的训练?

JerryHUZY avatar Sep 03 '25 10:09 JerryHUZY

请问这部分的代码在哪里呢?貌似没有找到InternVL-Flash

whu125 avatar Sep 05 '25 03:09 whu125

Router training会引入一个额外的线性分类器,这个阶段只训练这个线性分类器,其他的都冻住

Weiyun1025 avatar Sep 16 '25 03:09 Weiyun1025

请问这部分的代码在哪里呢?貌似没有找到InternVL-Flash

会尽快开源的,目前还在整理代码

Weiyun1025 avatar Sep 16 '25 03:09 Weiyun1025

请问这部分的代码在哪里呢?貌似没有找到InternVL-Flash

会尽快开源的,目前还在整理代码

InternVL3.5-Flash 的模型权重也会一并开源吗?

mmmz28 avatar Sep 16 '25 08:09 mmmz28

请问这部分的代码在哪里呢?貌似没有找到InternVL-Flash

会尽快开源的,目前还在整理代码

请问在3.5论文中Visual Consistency Learning的部分,I_ξ是表示一张图所有patch都统一压缩为1/4或1/16吗。另外,在ri的计算公式中,i似乎表示的是patch的index,但损失函数L_ViCO中的i似乎表示token的index,这样的话ri的计算公式该如何理解呢。

LebudiPrince avatar Sep 16 '25 10:09 LebudiPrince

开源的代码了吗?好像还没找到诶

XaviLv avatar Oct 28 '25 10:10 XaviLv

+1 Visual Consistency Learning 的训练代码开源了么,以及数据,期待

cokeshao avatar Nov 15 '25 10:11 cokeshao

+1 Would be greatly appreciated!

eshau avatar Nov 24 '25 16:11 eshau