crawlab
crawlab copied to clipboard
可配置爬虫 在线编辑 git钥匙优化
可配置爬虫配置阶段,添加可以设置自定义固定字段功能 可配置爬虫一旦未保存就跳出配置页,再次回到配置页时配置设置会回到上传保存状态 (这点很蛋疼 动不动就从头开始。。。) 可配置爬虫 列表xpyth / 下一页xpath 不要隐藏
(以下几点都是偶发性) 线上编辑还原到旧版本 scrapy 多个爬虫检测失败 因为这个问题运行scrapy时不能选择爬虫 爬虫文件丢失
git的SSH keys添加到多个git账户会出现以使用错误。 建议每个用户可以单独生成SSH keys
可配置爬虫进行在线编辑代码简直就是大型灾难现场。。。 建议在cli里面添加下载功能或着上传到git中,将文件放到本地编辑后再上传。