javaSpider
javaSpider copied to clipboard
知乎爬虫,各种数据
QueryShardException[No mapping found for [follower_count] in order to sort on] 启动项目的时候报这个错,请问怎么解决
感觉很cool,这个功能一定要做
每个记录都需要遍历,数据多了就有点悲剧了...
不一定会写,后续添加,主要可能是硬盘不够用的
不一定会添加,不要太期待
思路是在根主题下用时间搜索,对每日的数据根据create或者update时间索引 然后根据感谢和点赞数进行排序 应该不是太难, 不过我不太喜欢写正则表达式
用于403的时候切换代理