scrapy-examples icon indicating copy to clipboard operation
scrapy-examples copied to clipboard

Multifarious Scrapy examples. Spiders for alexa / amazon / douban / douyu / github / linkedin etc.

Results 8 scrapy-examples issues
Sort by recently updated
recently updated
newest added

i m the admin of a password protected site, is there a way to download the entire wordpress site ?

` File "/Users/lifuyi/www/scrapy-examples/misc/middleware.py", line 3, in from agents import AGENTS ModuleNotFoundError: No module named 'agents'` 不知道为什么会报这个错 然后可以改成兼容python3吗?我目前已经把print个expert改了。然后还遇到一些包引用问题。

enhancement

运行项目发现只能爬取出关于tag的url,之后直接就结束了,没有打印任何item信息,请问是什么问题?

bug

在linux上时候,,启动./startproject.sh 就可以创建一个新的scrapy框架。我想知道在在你windows下有没有也有这样写一个脚本,就可以直接创建scrap项目框架