web-bee icon indicating copy to clipboard operation
web-bee copied to clipboard

缓存

Open nonacosa opened this issue 7 years ago • 2 comments

爬取知乎百万数据为防止爬取重复用户以及生成关系策略需要进行缓存 java缓存百万数据不切实际额,需要开发webbee-redis插件

nonacosa avatar Apr 19 '17 17:04 nonacosa

这个可以看看 bitmap算法,以及已经实现的 BloomFilter;

哈哈

JPCui avatar Apr 25 '17 03:04 JPCui

@JPCui 好的,我晚上看看😄,本来打算用ehcache

nonacosa avatar Apr 25 '17 05:04 nonacosa