YayCrawler
Java
forked from 代码神童/YayCrawler
Java

分布式爬虫系统,简单使用,高级配置。可扩展,减轻开发量,能docker化,适应各种急切需求核心框架:WebMagic, Spring Boot ,MongoDB, ActiveMQ ,Spring + Quartz,Spring Jpa , Druid,Redis, Ehcache ,SLF4...

最近更新: 接近5年前

templatespider
Java
forked from 鬼画符/templatespider
Java

扒网站工具,看好哪个网站,指定好URL,自动扒下来做成模版。所见网站,皆可为我所用!

最近更新: 接近5年前

webmagic
Java
forked from 黄亿华/webmagic
Java

webmagic 是一个无须配置、便于二次开发的爬虫框架,它提供简单灵活的API,只需少量代码即可实现一个爬虫。

最近更新: 接近5年前

Gecco
Java
forked from xtuhcy/Gecco
Java

Gecco 是一款用java语言开发的轻量化的易用的网络爬虫,整合了jsoup、httpclient、fastjson、spring、htmlunit、redission等优秀框架。

最近更新: 接近5年前

搜索帮助