fp-server
fp-server copied to clipboard
很占用资源,阿里云乞丐版服务器跑了一下,直接卡死服务器
很占用资源,阿里云乞丐版服务器跑了一下,直接卡死服务器。还是放弃了。
https://github.com/Karmenzind/fp-server/blob/master/src/config/init.py#L62 可以在这里改一下同时运行爬虫的个数。
不清楚你的服务器配置什么样的,这是我电脑运行时的占用情况,CPU在0%-3%徘徊,内存基本不到1%。

你的部署方式是手动还是Docker?
Docker部署
那就尴尬了,Docker虽然轻,但也是比较耗资源的…… 你如果还感兴趣的话,试试手动部署吧。这个项目我会持续维护的,后面想办法控制一下资源占用。