# crawler

**Repository Path**: cynen/crawler

## Basic Information

- **Project Name**: crawler
- **Description**: 网络爬虫(Web crwaler ) 学习Demo
- **Primary Language**: Java
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2020-03-31
- **Last Updated**: 2022-09-05

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# crawler

#### 介绍
网络爬车(Web crwaler ) 学习Demo

主要用于记录我在学习网络爬虫的过程和心路历程.

# Java爬虫  Web Magic
## 环境准备
```
jdk1.8
IntelliJ IDEA
MAVEN
```

## 入门程序

## 网络爬虫介绍

## HttpClient抓取数据

## Jsoup解析数据

## 爬虫案例


## webmagic-pic 
这个是爬取图书馆的demo. 



# Python爬虫  Scrapy
projectdemo 是scrapy的demo

使用的是python的scrapy框架.