https://github.com/sinoon/crawler

https://github.com/sinoon/crawler

Last synced: 5 months ago
JSON representation

• Host: GitHub
• URL: https://github.com/sinoon/crawler
• Owner: sinoon
• Created: 2014-09-16T05:12:59.000Z (over 11 years ago)
• Default Branch: master
• Last Pushed: 2014-09-22T07:30:48.000Z (over 11 years ago)
• Last Synced: 2025-01-31T01:02:16.804Z (about 1 year ago)
• Language: JavaScript
• Size: 5.61 MB
• Stars: 0
• Watchers: 1
• Forks: 0
• Open Issues: 1
• Metadata Files:
  • Readme: README.md

Awesome Lists containing this project

README

          
**crawler**

=========

###说明###

  - 收集[澳客网][1]当前竞彩可以投注比赛信息，包括场次、联赛、轮次、比赛日期、比赛时间、主队与客队名字。

  - 同上，包括欧赔平均值、欧赔最大值、亚盘平均值、大小球平均值

  - 同上，收集初赔

  - 同上，收集交易盈亏方面数据。包括必发指数、必发价位、必发成交数据、必发庄家盈亏、竞彩投注量、竞彩庄家盈亏、99家平均、交易比例、交易冷热指数、市场指数、庄家赢亏指数。

  - 采用代理池随机取出一个代理来抓取一个页面的方式，更容易获取到信息，防止被网站屏蔽。

  - 代理池列表可以自动更新，在windows下建立计划任务，可以实时更新代理，在linux下用cron。

  [1]:http://www.okooo.com

 **NOTE:**个人学习实例。