webspider topic

Serritor is an open source web crawler framework built upon Selenium and written in Java. It can be used to crawl dynamic web pages that require JavaScript to render data.

peterbencze

东方财富网股吧爬虫

algosenses

A simple C# web spider application , It catches all the hotels of hangzhou from xiecheng 【一个简单的爬虫程序，提供了一个基础的框架，实现了对AJAX页面爬虫，并测试学习几个例子，详细见README。】

dathlin

A simple & efficient web crawler.

twiny

一个 Golang 实现的相对智能、无需规则维护的通用新闻网站数据提取工具库。含域名探测、网页编码语种识别、网页链接分类提取、网页新闻要素抽取以及新闻正文抽取等组件。

suosi-inc