RRHF
RRHF copied to clipboard
评估方法与位置有很大关系
我们在进行测试后,发现这样的评估方法和位置关系相当密切,把答案进行换位重评后的结果与先前有很大差异。 在使用GPT4等进行评估时,需要进行多次样本翻转来去除位置敏感性。
我们在进行测试后,发现这样的评估方法和位置关系相当密切,把答案进行换位重评后的结果与先前有很大差异。 在使用GPT4等进行评估时,需要进行多次样本翻转来去除位置敏感性。