渐染悲凉

Results 2 issues of 渐染悲凉

有平时上推看图的习惯,看到喜欢的都会点个赞,但是又嫌手动保存又太麻烦了。exe傻瓜版能直接通过https://twitter.com/User_ID/likes这个形式去把所有点过赞的爬下来吗。

1. 我推特点赞过的推有一万多条,爬过一次之后,再爬也会不断去扫之前爬过的内容,实际上遇到已经爬过的直接停止就行了。 2. 目前检测爬过的是通过对应路径是否存在同名的文件判断吗?当一个文件夹内容太多时会不方便管理,如果把已经下载过的内容剪切走的话,应该是会再下载一次。如果我只想下载新增的点赞内容,并且已经把之前下载过的图片转移走的话,应该是会重复下载。在对应的存储路径建立一个小的日志,记录上次爬取第一条推文id和本次爬取第一条推文id,当本次爬取遇到上次爬取的第一条推文时,就停止。 3. 设置过自定义保存文件名,再启动也会变回默认的文件名格式,每次都需要设置不太方便。

bug