corus icon indicating copy to clipboard operation
corus copied to clipboard

Published 20 hours ago • verified publisher icon natasha

Russian Dialogs Flibusta Picabu

Open kuk opened this issue 3 years ago • 2 comments

https://app.slack.com/client/T040HKJE3/C04N3UMSL/thread/C04N3UMSL-1607717401.453500

Привет, распарсил дохулиард диаологовых данных на русском языке (пикабу и диалоги из книг). 80+ гигов данных, плюс минус 200 миллионов диалогов (сложно точно посчитать, потому что диалоги с пикабу в формате дерева). Ссылка на пикабу: https://drive.google.com/file/d/1XYCprTqn_MlzDD9qgj7ANJkwFigK66mv/view?usp=sharing Ссылка на флибусту: https://drive.google.com/file/d/1Efe7QAstdg4zK5Ch4zfqw0OV7TPF12tV/view?usp=sharing Репозиторий с парсерами (там же описан формат файлов и там же есть пример парсера пикабушного дерева с диалогами): https://github.com/alexeykarnachev/dialogs_data_parsers

kuk avatar Dec 13 '20 16:12 kuk

Ссылки на файлы не работают( Можете опубликовать диалоги с флибусты повторно?

Den4ikAI avatar Jun 01 '22 08:06 Den4ikAI

@alexeykarnachev Не сохранились выгрузки?

kuk avatar Jun 01 '22 09:06 kuk