Dynamo Huang
Dynamo Huang
对于关键词的话 不需要设置cookie哈。用user-agent和代理就可以了，但抓排名比较烧代理
抱歉，才休假回来看到。 使用代理的方式运行很顺畅 ，使用案例可以参见https://www.pricejot.com/ 上面的top pricejot drop业务。 非登录后才能看到的信息抓取，不建议使用cookie池，直接ua池和代理池就足够了，使用cookie不当的话反而容易暴露。
add a proxy.json file in the amazon/amazon. like this ["198.52.39.104:3128", "31.207.5.155:3128"]
The feature is coming soon in the next month, or you can develop it and send pull request.
Thanks for your issue. 1. If you get "Robort Check" means you have blocked by amazon.(usually amazon wiil blocked 10 min). 2. The proxy.json contain some free ip proxy scrapy...
Yeah. cate -> asin -> details this is the right order. In the spider detail, the scrapy result wiil store in the var self.product_pool. And The Detail spider Just fetch...
坐等开源++
期待开源 或开源部分代码或jar包 一起撸前端 ！