clark

Results 9 comments of clark

思路: 一、使用此包做更新 step1.程序内,使用命令行更新 import os os.system("pip install --upgrade chinesecalendar") step2.设置定时任务即可,每天跑一次,应对反法西斯70周年那种突然放假的可能😳 二、爬虫监控国务院网站,出现”假日安排“关键字,钉钉@开发者,及时向此项目提交PR或者手动生成数据😃 http://www.gov.cn/zhengce/zuixin.htm 保证假期服务及时可靠~

> 更新之后解决不了动态依赖, 需要自己重启项目~各位注意呀 设计配置中心,从api或者redis拉取节假日数据,api或者redis的数据,你可以通过上述检查更新的方式更新

> > 不过这个提的倒是很好,我感觉可以提供一个 `.json` 文件,然后在必要的时候通过网络请求加载一次。 > > > 二、爬虫监控国务院网站,出现”假日安排“关键字,钉钉@开发者,及时向此项目提交PR或者手动生成数据😃 > > 基于爬虫的数据可以用我的 [holiday-cn](https://github.com/NateScarlet/holiday-cn) 就怕公告文本格式不统一,解析繁杂且出错

> Why not try [ScrapydWeb](https://github.com/my8100/scrapydweb) 试试去,看到1.2支持定制任务了Timer Tasks

> > 碰到同样的问题了,定时任务有时不能正常启动 > > 你解决了吗?你是怎么解决的 不用spiderkeeper,用了scrapydweb。spiderkeeper这个项目作者不维护了,任务一多sqlite锁死

scrapyd应该是只打包scrapy需要的文件格式,比如.py。我尝试放入图片也不行。

https://bbs.nightteam.cn/thread-345.htm 附加思考,记录一下

尝试过,mongo 6.0不支持,mongo 4.4可以