scrapy_doc_chs

scrapy_doc_chs copied to clipboard

我在 pipelines 中希望导入settings 但是出现了异常 ` File "xxx/spider/proxy/proxy/proxy/pipelines.py", line 8, in from scrapy.crawler.Crawler import settings ModuleNotFoundError: No module named 'scrapy.crawler.Crawler'; 'scrapy.crawler' is not a package`

shushashu

BarryLiu

purevirtual

spell errors

zeroceus

有计划翻译最新版1.5的scrapy文档吗

4

RT

xiaojidonggong

请问一下scrapy的Request类调用后，在scrapy底层什么地方去实际调用这个Request发起请求，然后产生Response对象的呢？我翻了好久的源代码，没有看到具体是在什么地方最终调用这个Request对象，然后产生Response的。 另外从Request程序的文档看来，仅仅是产生一堆配置好的属性，并没有太多实际意义，所以很想知道是在哪段程序发起具体的程序调用的。

kumfo

在 Scrapy 1.5.0 版本中，这个包 路径变更在 from scrapy.pipelines.images import ImagesPipeline 中。

atovk

`scrapy shell 'http://scrapy.org' --nolog` should be `scrapy shell http://scrapy.org --nolog`

htfei

正常情况下我在爬取的时候是可以通过telnet localhost 6023进入到python的控制台，但是爬虫总是在爬取几万个页面之后就卡主，程序无法跑任务，也不报错，请问这是为什么啊？然后使用telnet就一直不跳转到python控制台

zparkgao

smtpport (int) – SMTP连接的短裤 改为 smtpport (int) – SMTP连接的端口

stevenyvette