Kaan Sonmezoz

TurkishSentenceNormalizer combineNecessaryWords() java.lang.ArrayIndexOutOfBoundsException: -1

6

Merhaba, normalize() fonksiyonunu çalıştırdığımda combineNecessaryWords() fonksiyonu içerisinde java.lang.ArrayIndexOutOfBoundsException: -1 exception'ını alıyorum. Kodu incelediğimde ``` if (!combined) { result.add(((Token)tokens.get(tokens.size() - 1)).getText()); } ``` buradaki tokens.size()'ın olmasından kaynaklandığını ve ```boolean combined =...

BERTurk Training Dataset Preparation

6

Hello Stefan, I'm going to train another BERT model with different pre-training object from scratch. Then I will use it to compare with BERTurk and other Turkish pre-trained language models....