DeepPavlov
DeepPavlov copied to clipboard
deeppavlov
Добавление кастомного словаря/добавление слов в словарь по умолчанию
Из-за специфики предметных областей и обилия терминов spelling correction работает некорректно. Например на медицинских электронных документах. В словаре по умолчанию нет терминов и/или слэнговых выражений, тривиальных сокращений.
Эту проблему довольно легко решить, если позволить юзеру добавлять отсутствующие в словаре по умолчанию слова. Или добавить возможность указать ссылку на кастомный словарь в конфигурационном файле.
Как я решал эту проблему: скачал словарь по умолчанию, изменил его(добавив несколько новых слов), залил на гугл диск, изменил ссылку в конфигурационном файле на новый словарь(архив). Во время билдинга модели скачивается, но не распаковывается, а сама модель вообще перестает работать. Приложил скриншот.
