language-detector icon indicating copy to clipboard operation
language-detector copied to clipboard

Japanese text being identified as Kurmanji

Open ftkurt opened this issue 4 years ago • 3 comments

It's probably because of this line. https://github.com/DanielJDufour/language-detector/blob/e960b59f53a41e26d44201d54410fd62299f9b8c/language_detector/prep/char_language.txt#L73

See the following texts:

୨୧譲渡交換୨୧ ツイステ 色紙コレクション vol.1 vol.2 譲┊︎デューストレイケイト ジャミルオルトシルバー 求┊︎同異種リドル or 定価(+送料) 郵送 or 都内手渡し可能 ⿻ 各1BOX予約済みです。 ⿻…

東映HP更新✨ 来週はガルザとクランチュラがジャメンタルを研究🔍録りおろしナレーションたっぷりでお届けします! そしてHPで #キラトーーク 延長戦!? 魔進の声を演じるキャストのテンションMAX!なコメントを掲載しております✨ #キラ…

「DXヒューマギアプログライズキーセット」はご予約受付中!シェスタ、腹筋崩壊太郎、マモル、一貫ニギローのデータを宿したプログライズキーのセットです✨ 別売りのDXなりきりシリーズとも連動します。 URL…

ftkurt avatar Jun 07 '20 02:06 ftkurt