opencompass icon indicating copy to clipboard operation
opencompass copied to clipboard

Published 20 hours ago • verified publisher icon open-compass

[Feature] 直接在第三方脚本中启动评测

Open zitgit opened this issue 7 months ago • 0 comments

描述该功能

我已经在自己的脚本里有一个量化后的model实例了，我如何启动直接启动评测而不是重新在命令行中用python run.py方法加载model 就跟lm-eval支持的一样 image

是否希望自己实现该功能？

  • [ ] 我希望自己来实现这一功能，并向 OpenCompass 贡献代码！

zitgit avatar Jul 23 '24 12:07 zitgit