https://github.com/xishandong/weibo_crawler

支持多种爬取方式，下载用户相册，爬取用户帖子，爬取实时搜索帖子等，欢迎下载使用和补充功能
https://github.com/xishandong/weibo_crawler

python-crawler weibo weibo-spider

Last synced: 7 days ago
JSON representation

支持多种爬取方式，下载用户相册，爬取用户帖子，爬取实时搜索帖子等，欢迎下载使用和补充功能

• Host: GitHub
• URL: https://github.com/xishandong/weibo_crawler
• Owner: xishandong
• Created: 2023-03-20T12:42:45.000Z (over 1 year ago)
• Default Branch: master
• Last Pushed: 2023-09-24T06:53:05.000Z (about 1 year ago)
• Last Synced: 2023-09-24T14:28:59.562Z (about 1 year ago)
• Topics: python-crawler, weibo, weibo-spider
• Language: Python
• Homepage:
• Size: 39.1 KB
• Stars: 13
• Watchers: 1
• Forks: 5
• Open Issues: 0
• Metadata Files:
  • Readme: README.md

Awesome Lists containing this project

README

        
# weibo全站数据下载

***

# 做了一个集成，直接使用merge.py即可，其余可不用管

## 支持功能

***

1.  搜索框搜索关键词的帖子详情内容

2.  用户主页帖子详情内容

3.  用户相册所有图片下载

4.  指定帖子所有评论下载

# Install

***

```python

pip install requests

```

# 使用示例

见merge.py中的注释

## WARNING

***

除了搜索框搜索功能外，其他所有功能需要手动将cookies贴到相关类的初始化中

可以只用代码中罗列出来的cookie项

手动粘贴的cookie时效为1年