J-web-dotcom
Results
2
issues of
J-web-dotcom
Last Error Received: Process: MDX-Net If this error persists, please contact the developers with the error details. Raw Error Details: ReadTimeoutError: "ffmpeg output: b''" Traceback Error: " File "UVR.py", line...
十分感谢,您开发这个代码一直特别好用,在数据收集上帮了我大忙。但突然从昨天开始,只能一次爬取200-300条微博了。前几天还能爬几千条。换了账号,换了网,刷新了无数次cookie,也尝试了两种命令方式:scrapy crawl search -s JOBDIR=crawls/search 和 scrapy crawl search。都没有用。而且特别奇怪的是,过程中偶尔有几个日期能爬取300条以上甚至700多条微博,但大部分日期能抓取的微博数都在300条左右徘徊。我实际看了网页,明明微博数目远多于300条。这是什么原因导致的呢?