Fengshenbang-LM icon indicating copy to clipboard operation
Fengshenbang-LM copied to clipboard

Published 20 hours ago • verified publisher icon IDEA-CCNL

Ziya-Reader-13B-v1.0长度限制4-8K，请问LongBench中文多文档QA问题都是8K-27K，是如何测评的，采用首尾截断，还是重新构造了数据集？

Open Johnny-xyz opened this issue 1 year ago • 1 comments

Ziya-Reader-13B-v1.0长度限制4-8K，请问LongBench中文多文档QA问题都是8K-27K，是如何测评的，采用首尾截断，还是重新构造了数据集？

Johnny-xyz avatar Nov 10 '23 07:11 Johnny-xyz

@Johnny-xyz 你好，ziya-reader的长度限制是8k，采用后向截断，只保留前面的context

hejunqing avatar Dec 06 '23 04:12 hejunqing