# kuaishou-crawler

**Repository Path**: oGsLP/kuaishou-crawler

## Basic Information

- **Project Name**: kuaishou-crawler
- **Description**: As you can see, a kuaishou crawler
- **Primary Language**: Python
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 0
- **Created**: 2020-03-05
- **Last Updated**: 2023-12-29

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# kuaishou-crawler

> As you can see, a crawler for kuaishou pictures and videos

## Latest 

### Version 0.1.1 (2020-02-25)
#####  View [Change Log](./CHANGELOG.md)

* Python 3.7.3
    * requests
    * json
    * os
    * BeautifulSoup
    * re
* 功能：根据用户ID来爬取快手用户的作品，包括视频和图片
    * 在preset文件中一行行填写用户id，若缺少文件会自动创建
    * 注意有些用户没有自己的快手id，需要获取系统自动分配的eid (今后版本考虑根据普通id获取eid)
        * 如何分辨id是否可用: id中一定需要有字母，如果是纯数字，需要通过以下方式获得
        * 需要分享链接用浏览器打开，根据网址 https://live.kuaishou.com/profile/xxxx 获取id: xxxx
    * 使用时请自己用账号登录快手网站，并使用自己的cookie和`didweb`替换，不保证源代码可用
        * 爬取时请保持网站登录不关闭，实测快手网站的用户验证存在30-60分钟左右的有效时长，出现`list index out of range`时极可能是有效期已过，登录网站验证即可
        * 暂且不知道快手官方对过多请求的处理，目前碰到的有上述验证失效，也许也会有请求达到数量会中断请求，此时注释preset中已爬取的用户id，重新开始运行脚本即可
    * 爬取的视频暂时是带水印的(以后考虑获取无水印视频) 
* 注意事项：
    * 不考虑提供列表可选的批量下载功能
    * 有需要的合理功能可以issue反馈，看到后会考虑是否修改
    * 如果需要自定义自己的需求，可以拿走代码自行修改，喜欢的话给个star给个follow
    * **本代码仅供学习使用，不可违反法律爬取视频，以及私自盗用搬运视频，后果自负**
    * **本代码仅供学习使用，不可违反法律爬取视频，以及私自盗用搬运视频，后果自负**
    * **本代码仅供学习使用，不可违反法律爬取视频，以及私自盗用搬运视频，后果自负**
    * 重要的说三遍

## Future

* 自动根据id获取eid
* 获取无水印视频
* 进一步丰富preset预设文件的可配置选项
* 优化代码和log

## Again

**本代码仅供学习使用，不可违反法律爬取视频，以及私自盗用搬运视频，后果自负**