spider
所属分类:数据采集/爬虫
开发工具:JavaScript
文件大小:10KB
下载次数:0
上传日期:2017-12-27 02:32:24
上 传 者:
sh-1993
说明: 虎扑NBA新闻爬虫
(Tiger Pounding NBA News Crawler)
文件列表:
.eslintrc.js (519, 2017-12-27)
app.js (767, 2017-12-27)
cheerio_util.js (2482, 2017-12-27)
config.js (266, 2017-12-27)
index.js (2298, 2017-12-27)
mongoose.js (325, 2017-12-27)
package-lock.json (19517, 2017-12-27)
package.json (363, 2017-12-27)
processes.json (68, 2017-12-27)
redis.js (83, 2017-12-27)
tag_class.js (143, 2017-12-27)
# 抓取虎嗅文章
## Redis + Mongodb
```sh
mongod --port 27017 --dbpath [path]
```
```sh
npm i
```
```sh
1. node app.js init // 把要抓取文章id存入redis
2. node app.js crawl 10 // 10是抓取数量, 默认5条
```
近期下载者:
相关文件:
收藏者: