ChengRuiLiang

Results 3 comments of ChengRuiLiang

有什么方法能够对它进行性能优化,有没有适合重排模型的推理加速框架

> 想减少运行时间的话可以尝试使用低层输出、减少rerank的范围或使用bge-reranker-v2-m3 关于推理加速框架方面我们没有具体探究过 非常感谢