https://github.com/wzdnzd/aggregator

One-stop Proxies Crawling and Aggregation Platform
https://github.com/wzdnzd/aggregator

proxypool

Last synced: 6 months ago
JSON representation

One-stop Proxies Crawling and Aggregation Platform

• Host: GitHub
• URL: https://github.com/wzdnzd/aggregator
• Owner: wzdnzd
• License: apache-2.0
• Created: 2019-06-10T04:34:24.000Z (over 6 years ago)
• Default Branch: main
• Last Pushed: 2025-04-23T08:42:54.000Z (6 months ago)
• Last Synced: 2025-04-23T20:56:25.454Z (6 months ago)
• Topics: proxypool
• Language: Python
• Homepage: https://github.com/wzdnzd/aggregator
• Size: 628 MB
• Stars: 3,974
• Watchers: 31
• Forks: 4,430
• Open Issues: 1
• Metadata Files:
  • Readme: README.md
  • License: LICENSE

Awesome Lists containing this project

README

          


## 功能

打造免费代理池，爬一切可爬节点

> 拥有灵活的插件系统，如果目标网站特殊，现有功能未能覆盖，可针对性地通过插件实现

> 欢迎 Star 及 PR。对于质量较高且普适的爬取目标，亦可在 Issues 中列出，将在评估后选择性添加

## 使用方法

> 可前往 [Issue #91](https://github.com/wzdnzd/aggregator/issues/91) 食用**共享订阅**，量大质优。**请勿浪费**

 

略，自行探索。我才不会告诉你入口是 `collect.py` 和 `process.py`。**强烈建议使用后者，前者只是个小玩具**，配置参考 `subscribe/config/config.default.json`

## 免责申明

+ 本项目仅用作学习爬虫技术，请勿滥用，不要通过此工具做任何违法乱纪或有损国家利益之事

+ 禁止使用该项目进行任何盈利活动，对一切非法使用所产生的后果，本人概不负责

## 致谢

[Subconverter](https://github.com/asdlokj1qpi233/subconverter)、[Mihomo](https://github.com/MetaCubeX/mihomo)