# bsbs

**Repository Path**: zhaojinlin/bsbs

## Basic Information

- **Project Name**: bsbs
- **Description**: dddd
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2018-04-27
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# bsbs

#### 项目介绍
scrapy_redis实现分布式爬虫

#### 使用说明

1. libs文件夹存放代理ip和headers
2. spiders文件夹存放爬虫脚本zhi_wang.py
3. items.py是定义需要爬取的字段
4. middlewares.py是定义爬虫的中间件
5. pipeline.py是存储数据到数据库
6. setting.py是配置文件
7. start.py是启动爬虫的脚本