LLaMA-Factory
LLaMA-Factory copied to clipboard
请问llamafactory-cli eval支持的评估方式有哪些?
请参考 https://zhuanlan.zhihu.com/p/695287607 批量推理和eval部分
eval 目前支持 mmlu cmmlu 和 ceval
eval 目前支持 mmlu cmmlu 和 ceval
请问能不能支持自定义数据集(类似sharegpt格式)的评估?如果不能,能否给个思路修改源码来支持自定义数据集的评估?