gocrawler topic
List
gocrawler repositories
katana
12.0k
Stars
625
Forks
91
Watchers
A next-generation crawling and spidering framework.
go-crawler-distributed
48
Stars
6
Forks
Watchers
分布式爬虫项目，本项目支持个性化定制页面解析器二次开发，项目整体采用微服务架构，通过消息队列实现消息的异步发送，使用到的框架包括：redigo, gorm, goquery, easyjson, viper, amqp, zap, go-micro，并通过Doc...