WebSPHINX网络爬虫工具
WebSPHINX (Website-Specific Processors for HTML INformation eXtraction)是一个用于网络爬虫的 Java 类库和互动开发环境。网络爬虫是一个自动浏览和处理网页的程序。
WebSPHINX 由两部分组成：爬虫工作平台和WebSPHINX类库。
评论
DenseSpider网络爬虫
本项目fork项目go_spider，github：https://github.com/hu17889/go_spider ，因此项目架构的部分文档可以参考此项目。同时项目架构、部分思路参考了pyt
DenseSpider网络爬虫
0
goodcrawler网络爬虫
goodcrawler(GC)网络爬虫GC是一个垂直领域的爬虫，同时也是一个拆箱即用的搜索引擎。GC基于httpclient、htmlunit、jsoup、elasticsearch。GC的特点：1、
goodcrawler网络爬虫
0
kamike.collect网络爬虫
AnotherSimpleCrawler又一个网络爬虫，可以支持代理服务器的翻墙爬取。1.数据存在mysql当中。2.使用时，先修改web-inf/config.ini的数据链接相关信息，主要是数据库
kamike.collect网络爬虫
0