opencompass
opencompass copied to clipboard
[Feature] 建议增加Embedding模型评测
描述该功能
Embedding模型在知识的召回起到至关重要的作用,针对Embedding的专业评测非常有价值。
是否希望自己实现该功能?
- [ ] 我希望自己来实现这一功能,并向 OpenCompass 贡献代码!
Are there any specific examples of the embedding models we are talking here? I'm not very familiar with this field.
请教下,你这边复现的结果和榜单上是一致的吗?
描述该功能
Embedding模型在知识的召回起到至关重要的作用,针对Embedding的专业评测非常有价值。
是否希望自己实现该功能?
- [ ] 我希望自己来实现这一功能,并向 OpenCompass 贡献代码!
Welcome more detailed suggestions about evaluation of embedding model.
请教下,你这边复现的结果和榜单上是一致的吗?
We may provide more help if you can provide the information of the evaluation experiments, like the specific model and dataset