请问数据集中 avg length 是单词长度/字长度还是token个数？

[deepindeed2022]

[bys0318]

由于不同模型的tokenizer不同，为了统一长度测度，我们汇报的avg length对于中/英数据集分别是是字数/单词数。