Awesome
停止维护
<p align="center"><a href="https://github.com/java-webbee/webBee" target="_blank"><img width="300"src="https://dn-mhke0kuv.qbox.me/cfc1928e37ff0ac46463.png"></a></p> <p align="center"> <a href="https://github.com/ /webBee/blob/master/LICENSE"><img src="https://img.shields.io/badge/license-MIT-4EB1BA.svg?style=flat-square" alt="Build Status"></a> <a href="https://travis-ci.org/java-webbee/webBee"><img src="https://travis-ci.org/java-webbee/webBee.svg?branch=master" alt="Coverage Status"></a> <a href="https://gitter.im/web_bee"><img src="https://badges.gitter.im/java-webbee/web-bee.svg" alt="Downloads"></a><a href="https://github.com/java-webbee/webBee/issues?q=is%3Aissue+is%3Aclosed"><img src="https://img.shields.io/github/issues-closed/java-webbee/webBee.svg" alt="License"></a> <a href="#"><img src="https://img.shields.io/badge/version-0.0.1-red.svg?style=flat-square" alt="Sauce Test Status"></a> </p>webBee 为乐趣而爬
-
webBee
基于jdk8
是一个持续成长的垂直爬虫框架
项目 -
webBee
遵循MIT
开源协议 -
webBee
是一个不错的java进阶项目 -
欢迎大家贡献代码,如果觉得这个项目不错,请为它
点赞
演示站点
- http://gitrue.com (备案成功,开发中)
设计初衷
- 设计简洁,面向接口
- 配置简单,明了
- 一次配置,自动匹配
涉及技术栈
-
httpcomponents
-
jsoup
-
redis
-
代理
-
多线程
- 分布式爬取
- 代理接口
- 通过配置智能寻找目标
url
- 图片、视频的处理
todo
- 制作一个炫酷的官网实例
开源讨论群
147255248
已解散