# scrapy

**Repository Path**: lianchen5/scrapy

## Basic Information

- **Project Name**: scrapy
- **Description**: No description available
- **Primary Language**: Python
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2026-03-18
- **Last Updated**: 2026-03-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

\# Scrapy Docker 项目



一个完整的Scrapy爬虫Docker化示例，可以爬取名言网站。



\## 功能特点



\- ✅ 完整的Docker配置

\- ✅ 示例爬虫（quotes.toscrape.com）

\- ✅ 数据持久化存储

\- ✅ 日志记录

\- ✅ Redis支持（分布式爬虫）

\- ✅ 健康检查

\- ✅ 非root用户运行

\- ✅ 环境变量配置



\## 快速开始



\### 1. 构建和运行



```bash

\# 克隆或创建项目

mkdir my\_scrapy\_docker

cd my\_scrapy\_docker



\# 复制所有配置文件



\# 使用docker-compose运行

docker-compose up -d



\# 查看日志

docker-compose logs -f scrapy



\# 停止服务

docker-compose down