FlashRAG icon indicating copy to clipboard operation
FlashRAG copied to clipboard

跑出来的结果很差,怎么提升效果,语料库还是换参数量大的模型

Open snow163 opened this issue 1 year ago • 4 comments

连续四条的结果 1 2 3 4

snow163 avatar Jul 04 '24 07:07 snow163

具体设置能否提供一下?

最好是用7B以上的模型

ignorejjj avatar Jul 04 '24 07:07 ignorejjj

可以先尝试跑完1000条数据之后看看指标能否与论文里的结果对齐。前四条数据答不对比较正常。

ignorejjj avatar Jul 04 '24 07:07 ignorejjj

后面会将gpt等非开源模型集成上去吗?很多论文都是使用gpt3.5作为生成器。

snow163 avatar Jul 05 '24 00:07 snow163

现在已经集成了openai的接口。参考basic_config.yaml中的设置,把framework设置为openaigenerator_model设置为对应的模型名称,并设置openai_setting即可。 ·

ignorejjj avatar Jul 05 '24 01:07 ignorejjj