https://github.com/qieguo2016/spiders

一个NodeJs爬虫集，包括知乎、豆瓣、拉勾等网站爬虫
https://github.com/qieguo2016/spiders

Last synced: about 1 month ago
JSON representation

一个NodeJs爬虫集，包括知乎、豆瓣、拉勾等网站爬虫

• Host: GitHub
• URL: https://github.com/qieguo2016/spiders
• Owner: qieguo2016
• License: mit
• Created: 2016-09-30T09:42:27.000Z (about 8 years ago)
• Default Branch: master
• Last Pushed: 2017-02-15T16:00:57.000Z (almost 8 years ago)
• Last Synced: 2024-08-03T09:09:42.768Z (4 months ago)
• Language: JavaScript
• Homepage:
• Size: 1.4 MB
• Stars: 273
• Watchers: 8
• Forks: 102
• Open Issues: 1
• Metadata Files:
  • Readme: README.md
  • License: License

Awesome Lists containing this project

• awesome-github-star - spiders

README

        
A Store of Spiders

------

- 知乎爬虫

    有两个版本，数据库版本和JSON文件版本。具体说明参见项目内部说明文档。

    ![知乎爬虫效果](https://github.com/qieguo2016/spiders/blob/master/resource/zhihu.jpg)

- 拉勾爬虫

    主要是统计不同岗位在不同城市的分布情况：公司规模，需求年限等，本来想结合地图做热力图分布图啥的，还是太懒。。。

     ![知乎爬虫效果](https://github.com/qieguo2016/spiders/blob/master/resource/lagou.png)

- 豆瓣爬虫

    根据标题关键词筛选选定小组内的帖子。

     ![知乎爬虫效果](https://github.com/qieguo2016/spiders/blob/master/resource/douban.png)

**PS：欢迎大家把自己手上的爬虫拿出来分享哈!**

**另外，还请顺手给个star呗！<(￣ˇ￣)/**

*上面的图有点问题？我什么也不知道呀！(*/ω╲*)纯真脸*