eval-scope icon indicating copy to clipboard operation
eval-scope copied to clipboard
verified publisher icon modelscope

性能评测如何设置system prompt呢

Open xzbdmw opened this issue 10 months ago • 1 comments

xzbdmw avatar May 26 '25 03:05 xzbdmw

请参考这个文档设置：https://evalscope.readthedocs.io/zh-cn/latest/get_started/parameters.html#id3

Yunnglin avatar May 26 '25 08:05 Yunnglin

感谢你的反馈！我们将关闭此问题。如果您有任何疑问，请随时重新打开它。如果EvalScope对您有所帮助，欢迎给我们点个STAR以示支持，谢谢！

Yunnglin avatar May 28 '25 02:05 Yunnglin

system_prompt不在perf/argument.py 文件里的参数里, 我是直接修改tokenizer_config.json来嵌入提示器的

xzbdmw avatar May 28 '25 02:05 xzbdmw

不支持perf直接设置system_prompt，可以参考来自定义数据集 https://evalscope.readthedocs.io/zh-cn/latest/user_guides/stress_test/custom.html#id3

Yunnglin avatar May 28 '25 03:05 Yunnglin