weibo-crawler issues

更改self.start_page没起作用

1

你好，此前使用过更改起始页的方式，成功从较旧的页面开始抓取。这两天使用发现不奏效了，能麻烦看一下吗？谢谢。 self.start_page = config.get('start_page', 1) # 开始爬的页，如果中途被限制而结束可以用此定义开始页码

qehuang

微博照片水印接口

5

- sinaimg.cn/large/xx.jpg。large改为oslarge，即可实现去水印

qqlogin

只爬取了部分微博内容

5

您好，我今天爬取了一个微博账号的内容，是从2016年开始爬取的，但是爬完后发现只下载了2021年5月之后的内容，我已经添加了cookie, 然后也关注了该微博，它没有报错误，非常正常地结束了爬取，但是就是只下载了部分内容，连试了两次依然出现了这个状况，想问一下怎么解决这个问题呢？

sa1yi2

请问下面这两个错误我应该怎么修改啊？我的cookie是被封了吗？

2

请问这两个问题我应该怎么修改代码啊？我的cookie是被封了吗？ Error: 'Weibo' object has no attribute 'cookie' name 'traceback' is not defined Traceback (most recent call last): File "G:\图片\weibo-crawler-master\weibo.py", line 324, in get_long_weibo html = requests.get(weibo_link, cookies=self.cookie).content AttributeError: 'Weibo'...

sa1yi2

被ban了

6

大佬，我用新修复的代码只获取用户数据，但到第50个的时候就出错了，显示被ban了，然后程序就停止了。利用修复Logging error之前的版本时没有出现这个错误，可以一直获取数据。

konglq1025

能否加一个采集时间字段

5

可否增加一个采集时间字段，2021-01-01 01:11:33,这样的

swordcarefree

--- Logging error ---TypeError: %d format: a number is required, not str

2

大佬，最近出现了如楼上所说的错误，我的也出现了。 --- Logging error --- Traceback (most recent call last): File "E:\python\anaconda3\lib\logging\__init__.py", line 983, in emit msg = self.format(record) File "E:\python\anaconda3\lib\logging\__init__.py", line 829, in format return fmt.format(record) File "E:\python\anaconda3\lib\logging\__init__.py", line...

konglq1025