HMFT
HMFT copied to clipboard
数据集标注处理问题
您好,想问一下作者,VTUAV数据集采用稀疏标注,即每十帧给一个bbox的标注信息,但是如果sampler采样到未标注帧的frame_ids,您是怎样处理的呢?在您的项目里,没有找到该部分对应的代码段。可以提示一下您获取未标注帧目标框bbox信息,代码所在的位置吗,非常感谢!!!
可以看下 数据集部分Line 133
非常感谢,不过作为一名目标跟踪的新手,有以下几个问题还是想请教一下您: 问题一:从代码来看,您的init_frame.npy中所给的信息,指的是在对应序列中,与第一个bbox标注信息所对应的起始标注图像的index是吧? 问题二:在您的测试代码中,看到您是直接保存了测试序列所有的预测bbox,这样的话,还需要根据MSR和MPR的计算规则,手动处理“预测bbox”和“groundtruth bbox”才能计算出实验所获得的MSR,和MPR指标吗,还是项目中有现成的计算代码? 问题三:VTUAV是否可以像一些RGB数据集那样,引入额外的训练集?
问题1:对的,init_frame保存的是标注的第一帧 问题2:我们的toolkit已经公开link 问题3:可以的,我们的数据集可以用额外的数据训练(最好标明训练集)
非常感谢您的回答,目前正在基于您发布的数据集来训练新的模型。有一些训练的问题还是想请教您一下,首先在训练集解压后发现缺少'pedestrian_170'视频序列,但我查看了已经下载的压缩包,也没发现该视频序列所在压缩包,作者可否给一下提示?还有就是您发表在CVPR2022上的关于RGB-T系列数据集以及VTUAV数据集上的测试结果,在训练阶段是否引用了额外的训练集的呢?
pedestrian_170在train_ST_006中; HFMT tracker只使用VTUAV训练集进行训练,并用于VTUAV的测试
感谢您的回答,之前的问题都得到了很好的解决。目前已经在VTUAV上取得了一些结果,并准备将模型用于其他数据集,进行训练和测试。现在经获得了GTOT和RGBT系列的数据集以及RGBT234的toolkit,但没有获得这三个数据集的划分文件(训练,验证,测试)。所以目前还是有几个问题想请教一下作者,首先您是否方便帮助提供一下另外三个数据集的划分文件?其次就是,您在另外三个数据集上进行训练时,也都是仅基于各自的训练集进行训练而获得论文中的测试结果吗?
在GTOT上fine-tune时,所有数据都用作训练,用于测试RGBT210和RGBT234;在测试GTOT时,只使用了VTUAV数据集训练
非常感谢作者一直以来热心的回答和您已发表的优秀工作,目前基于GTOT和RGBT系列数据集的测试已经基本完成,并整理实验结果。但还是想再次向您确认一下,我的实验设置是否和您在训练HMFT tracker时的训练设置相同,以确保在和HMFT tracker进行对比时的公平性。我的实验设置如下: 1.以VTUAV,GTOT所有序列作为训练集,将整个RGBT234作为测试集,对整个RGBT234数据集所有序列的测试结果计算MSR和MPR指标。 2.RGBT210的训练测试设置同RGBT234 3.以VTUAV所有序列作为训练集,将整个GTOT作为测试集,对整个GTOT数据集所有序列的测试结果计算MSR和MPR指标。 请问上述训练测试设置是否和您对齐?
没问题 @xiajianqiang
哈哈,谢谢啦!
由于前期工作的疏忽,现在有个问题需要紧急向作者求证一下。您在分别测试short-term和long-term序列时,是分别使用各自的训练集来训练,然后分别测试,还是将长短时的训练集作为一个整体的训练集,然后统一测试short-term和long-term序列呢?希望作者看到之后能快速回复一下,非常感谢!
用各自训练集来训练