crawlab icon indicating copy to clipboard operation
crawlab copied to clipboard

【优化建议】希望在可配置爬虫时,增加浏览器滑动选择对应字段的提取功能,用于简化配置流程

Open lanren0451 opened this issue 6 years ago • 3 comments

希望对于列表页和详情页能提供通过浏览器滑动选择,来进行字段提取的配置,简化通过人工总结xpath或css的方式进行字段提取

lanren0451 avatar Jan 15 '20 02:01 lanren0451

翻页功能么?

tikazyq avatar Jan 15 '20 03:01 tikazyq

是简化筛选目标字段的功能,目前都是要人工输入xpath,是否可以通过浏览器渲染之后 通过滑动鼠标的方式选择需要采集的目标属性

lanren0451 avatar Jan 20 '20 06:01 lanren0451

是简化筛选目标字段的功能,目前都是要人工输入xpath,是否可以通过浏览器渲染之后 通过滑动鼠标的方式选择需要采集的目标属性

界面操作暂时还没有,底层是scrapy,暂时不支持click、select等事件,等后续开发以puppeteer为底层引擎的可配置爬虫

tikazyq avatar Jan 20 '20 06:01 tikazyq