ACVNet icon indicating copy to clipboard operation
ACVNet copied to clipboard

关于KITTI数据集的评估问题

Open lumeihe opened this issue 2 years ago • 0 comments

作者您好,原谅我使用汉语请教您,(我英文水平太菜了)。 1、对于SceneFlow数据集的评估,普遍都使用EPE(也就是MAE)作为评估标准,而且代码里也可以实现评估函数进行评估。 2、对于KITTI2012数据集,评价标准有Noc和Occ(All)的>2px, >3px, >4px, >5px以及Mean Error的错误率和错误像素数的评估,这些评估都是需要在自己代码里面实现它们的函数吗?还是需要提交到KITTI官网上生成评测结果呢? 3、对于KITTI2015数据集,评价标准里有All(Occ)和Noc的D1-bg,D1-fg,D1-all的错误率评估,需要自己在代码里面实现评估函数吗,还是必须提交到KITTI官网上评测结果呢? 3、发论文的话,KITTI12和15的实验数据必须来自kitti的官方网站吗? 对于以上问题,目前还是比较迷惑的,kitti网站好像说是不能用于调试程序,每个人只能在规定时间内提交一次把,也不能申请多个账号吧。 所以对于这些评价标准的问题,还望作者大佬您能在百忙中抽出时间不吝赐教,万分感谢!!!~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~小白先行谢过!!!!!!!

lumeihe avatar Aug 01 '22 08:08 lumeihe