roberta_zh icon indicating copy to clipboard operation
roberta_zh copied to clipboard

预处理数据丢失问题

Open puzzledTao opened this issue 4 years ago • 1 comments

你好,在数据预处理代码中,若该行的数据长度超过max_sequence_length_allowed,则该行数据就丢失了? 11

puzzledTao avatar Feb 19 '21 12:02 puzzledTao

我也有这样的问题,感觉truncate应该更加科学

Julia-Quan avatar Oct 10 '21 06:10 Julia-Quan