nodeJs -- 基于Express、superagent 和 cheerio

先介绍一下，

superagent(http://visionmedia.github.io/superagent/) 是个 http 方面的库，可以发起 get 或 post 请求。

cheerio(https://github.com/cheeriojs/cheerio) 大家可以理解成一个 Node.js 版的 jquery，用来从网页中以 css selector 取数据，使用方式跟 jquery 一样一样的。

1.新建文件夹并进入：mkdir node && cd node

2.npm init 生成Package.json

3.npm install express superagent cheerio --save (后面的save很重要 会把依赖添加到package.json 部署到服务器时方便 直接

npm install)

4.touch app.js

5.vim app.js

6.app.js的代码写入

var express = require('express');

var superagent = require('superagent');

var cheerio = require('cheerio');

var app = express();

app.get('/',function(req,res,next){

superagent.get('https://cnodejs.org/')

.end(function(err,sres){

if(err){

return next(errr);

}

var $ = cheerio.load(sres.text);

var items = [];

$('#topic_list .topic_title').each(function(idx,element){

var $element = $(element);

items.push({

title: $element.attr('title'),

href: $element.attr('href')

});

});

res.send(items);

});

});

app.listen(3000,function(req,res){

console.log("app work at 3000");

});

7.访问localhost:3000 就可以看到爬下来东西