MARBLE-Benchmark icon indicating copy to clipboard operation
MARBLE-Benchmark copied to clipboard

GTZAN-genres 复现偏低?

Open xujinchang opened this issue 9 months ago • 3 comments

你好,使用git中的脚本测试GTZAN-genres的probe结果,mert-v1-95M和330M的结果都偏低,是不是git中的脚本不是论文中得到最终结果的脚本?模型使用的这个https://huggingface.co/m-a-p, 直接测试mert-v1-95M的accuracy 0.7689, 330M的结果0.7379,对比论文的结果0.786,0.793差了比较多。

xujinchang avatar Sep 21 '23 03:09 xujinchang