FlagEmbedding icon indicating copy to clipboard operation
FlagEmbedding copied to clipboard

FlagReranker.compute_score 分数的分布是哪个区间呢?

Open CXLiang123 opened this issue 1 year ago • 4 comments

  • 问题1:两个一样的句子,其分数也没有到达10 image
  • 问题2: 分数的分布的区间是什么呢,如果想归一化,有推荐的归一化方法或函数么

CXLiang123 avatar Mar 21 '24 04:03 CXLiang123

  1. reranke的score没有最大值范围。
  2. 可以通过sigmoid函数将分数映射到0-1之间。最新版的代码已加入此功能(normlize_score=True):https://github.com/FlagOpen/FlagEmbedding/tree/master/FlagEmbedding/llm_reranker#for-normal-reranker-bge-reranker-base--bge-reranker-large--bge-reranker-v2-m3-

staoxiao avatar Mar 21 '24 10:03 staoxiao

  1. reranke的score没有最大值范围。
  2. 可以通过sigmoid函数将分数映射到0-1之间。最新版的代码已加入此功能(normlize_score=True):https://github.com/FlagOpen/FlagEmbedding/tree/master/FlagEmbedding/llm_reranker#for-normal-reranker-bge-reranker-base--bge-reranker-large--bge-reranker-v2-m3-

请问下你的FlagEmbedding是什么版本的呢?我安装的1.2.5使用compute_score的normalize=True显示参数不存在

1104347305 avatar Mar 22 '24 02:03 1104347305

  1. reranke的score没有最大值范围。
  2. 可以通过sigmoid函数将分数映射到0-1之间。最新版的代码已加入此功能(normlize_score=True):https://github.com/FlagOpen/FlagEmbedding/tree/master/FlagEmbedding/llm_reranker#for-normal-reranker-bge-reranker-base--bge-reranker-large--bge-reranker-v2-m3-

请问下你的FlagEmbedding是什么版本的呢?我安装的1.2.5使用compute_score的normalize=True显示参数不存在

可以更新到最新版:pip install -U FlagEmbedding

staoxiao avatar Mar 22 '24 06:03 staoxiao

这是来自QQ邮箱的假期自动回复邮件。您好,我最近正在休假中,无法亲自回复您的邮件。我将在假期结束后,尽快给您回复。

1104347305 avatar Mar 22 '24 06:03 1104347305