weibo-crawler icon indicating copy to clipboard operation
weibo-crawler copied to clipboard

无法保存成本地csv或json文件

Open yxqsophie opened this issue 3 years ago • 2 comments

虽然terminal (MacOS Mojave) 中能实时看到爬取的微博,all.log也会相应更新,但自动生成的weibo文件夹中只有user.csv一个文件,并没有自动生成以用户名/id命名的文件夹,也没有保存微博内容的csv文件(试过json也不行)。

config.json设置如下,几乎没作什么改变: { "user_id_list": ["1669879400"], "filter": 0, "remove_html_tag": 1, "since_date": "2018-01-01", "start_page": 1, "write_mode": ["csv"], "original_pic_download": 1, "retweet_pic_download": 0, "original_video_download": 0, "retweet_video_download": 0, "download_comment":1, "comment_max_download_count":100, "result_dir_name": 0 }

yxqsophie avatar Jan 18 '22 04:01 yxqsophie

有报错吗

dataabc avatar Jan 18 '22 07:01 dataabc

谢谢,问题已解决。似乎每个账号的文件夹不是在开始抓取时它的内容时立即创建,而是会滞后几分钟。没有报错。

yxqsophie avatar Jan 18 '22 20:01 yxqsophie