新浪微博相册大图多线程爬虫

闲来无事，想爬一下微博妹子相册

于是在Github上搜了一下，有很多这方面的项目

我就说说其中一个吧

https://github.com/Lodour/Weibo-Album-Crawler

正文

安装python3和git

Linux下的话用自带的包管理安装即可，非常简单

yum install -y git python3

apt install -y git python3

Windows下git建议安装一个git bash
https://www.git-scm.com/download/

Python3从官网下载安装即可
https://www.python.org/downloads/

克隆爬虫项目

git clone [email protected]:Lodour/Weibo-Album-Crawler.git
cd Weibo-Album-Crawler
pip install -r requirements.txt
mv settings.sample.py settings.py

设置settings.py

STORE_PATH 下载目录(注意不要为不存在的目录)

COOKIES 任意用户微博的 Cookies，或设置为 AUTO 以自动获取（需安装 ChromeDriver）

TARGETS 目标用户的微博主页url，可设置多个，示例如下

# 在这里添加目标用户的微博主页url
TARGETS = [
    'https://weibo.com/u/1927305954',
    'https://weibo.com/p/1005053238576424',
    'https://weibo.com/p/1005056068851418',
    'https://weibo.com/p/1005052436325165',
    'https://weibo.com/p/1005055588555086',
]

运行

python3 main.py

截图