unicrawler icon indicating copy to clipboard operation
unicrawler copied to clipboard

一个可配置的、分布式的爬虫框架

Results 5 unicrawler issues
Sort by recently updated
recently updated
newest added

实在是跑不起来,可以麻烦联系你一下,帮忙爬点数据吗?数据量很小的,可以吗?谢谢!

Can this be upgraded to Python3+ ?

hello,我运行python manage.py migrate的时候出现标题importError的错误,但是我没找到有local_settings这个文件,麻烦您告知一下怎么解决。

- [x] Json中如何存放python code 在前端使用编辑器,后端存储时字符串化 - [x] innerHtml 获取 使用lxml.html.to_string()解决 - [x] html 去除script和外链 使用正则表达式解决 - [x] 部分直接以链接跳走 - [x] 图片类型下载到七牛云 - [ ] exec传入当前url等信息 - [ ] 监控 -...