weibo-search icon indicating copy to clipboard operation
weibo-search copied to clipboard

Published 20 hours ago • verified publisher icon dataabc

爬出的微博时间总是集中于某几个时间段

Open JamesZabc opened this issue 3 years ago • 4 comments

您好，还有一个问题想请教一下

在爬数据的时候，可能指定了一个月的范围，但是爬出来的数据大部分都集中在某几天，甚至某几天的某几个小时（设定的时间越长这种问题越明显），鉴于我选择的话题热度比较高，不应该会出现大幅度集中的现象，请问是什么原因导致的，有什么解决方法呢？

感谢！

JamesZabc avatar May 18 '21 14:05 JamesZabc

感谢反馈。我怀疑是参数FURTHER_THRESHOLD太大，减小数值看看。

dataabc avatar May 19 '21 06:05 dataabc

爬取的数据总是集中于结束日期

ranxi2001 avatar Jul 11 '21 02:07 ranxi2001

您好，还有一个问题想请教一下

在爬数据的时候，可能指定了一个月的范围，但是爬出来的数据大部分都集中在某几天，甚至某几天的某几个小时（设定的时间越长这种问题越明显），鉴于我选择的话题热度比较高，不应该会出现大幅度集中的现象，请问是什么原因导致的，有什么解决方法呢？

感谢！

老哥解决了吗？我也遇到了同样的问题

zhizk1995 avatar Oct 22 '21 11:10 zhizk1995

我也遇到了同样的问题，爬取的微博集中在end date最后几分钟

wenpei-22 avatar May 15 '22 13:05 wenpei-22