Fork me on GitHub

Any application that can be written in JavaScript, will eventually be written in JavaScript.

SuperAgent 中文使用文档

SuperAgent 是一个轻量的,渐进式的 ajax api,是一个流行的 nodejs 第三方模块,专注于处理服务端/客户端的http请求,可读性好,学习曲线低,内部依赖 nodejs 原生的请求api,适用于 nodejs 环境下。SuperAgent提供了更加简单、优雅的API,让你在处理请求时更加方便。而且它很轻量,学习曲线平滑,内部其实就是对内置模块的封装。SuperAgent 是一个写 node 爬虫的很好的 tools,当你想理 get,post,put,delete,head请求时,你就应该想起该用它了 :)

SuperAgent

SuperAgent 是一个轻量的,渐进式的ajax api,可读性好,学习曲线低,内部依赖nodejs原生的请求api,适用于nodejs环境下.
一个简单的post请求,并设置请求头信息的例子

1
2
3
4
5
6
7
8
9
10
11
12
request
.post('/api/pet')
.send({ name: 'Manny', species: 'cat' })
.set('X-API-Key', 'foobar')
.set('Accept', 'application/json')
.end(function(res){
if (res.ok) {
alert('yay got ' + JSON.stringify(res.body));
} else {
alert('Oh no! error ' + res.text);
}
});

测试文档

这个链接文档,是用Mocha’s文档自动输出的,下面提供了这个测试文档对应的源文件

请求基础

一个请求的初始化可以用请求对象里合适的方法来执行,然后调用end()来发送请求,下面是一个简单的get请求

1
2
3
4
request
.get('/search')
.end(function(res){
});

请求方法也可以通过参数传递:

1
request('GET', '/search').end(callback);

node客户端也允许提供绝对路径:

1
2
3
4
request
.get('http://example.com/search')
.end(function(res){
});

delete,head,post,put和别的http动作都可以使用,来换个方法看看:

1
2
3
4
request
.head('/favicon.ico')
.end(function(res){
});

delete是一个特列,因为它是系统保留的关键字,所以应该用.del()这个名字:

1
2
3
4
request
.del('/user/1')
.end(function(res){
});

http请求默认的方法为get,所以就像你看到的,下面的这个例子也是可用的:

1
2
3
request('/search', function(res){

});

设置头字段

设置头字段非常简单,只需调用.set()方法,传递一个名称和值就行:

1
2
3
4
5
request
.get('/search')
.set('API-Key', 'foobar')
.set('Accept', 'application/json')
.end(callback);

你也可以直接传递一个对象进去,这样一次就可以修改多个头字段:

1
2
3
4
request
.get('/search')
.set({ 'API-Key': 'foobar', Accept: 'application/json' })
.end(callback);

Get请求

当使用get请求传递查询字符串的时候,用.query()方法,传递一个对象就可以,下面的代码将产生一个/search?query=Manny&range=1..5&order=desc请求:

1
2
3
4
5
6
7
8
request
.get('/search')
.query({ query: 'Manny' })
.query({ range: '1..5' })
.query({ order: 'desc' })
.end(function(res){

});

或者传一个单独的大对象:

1
2
3
4
5
6
request
.get('/search')
.query({ query: 'Manny', range: '1..5', order: 'desc' })
.end(function(res){

});

.query()方法也允许传递字符串:

1
2
3
4
5
6
request
.get('/querystring')
.query('search=Manny&range=1..5')
.end(function(res){

});

或者字符串拼接:

1
2
3
4
5
6
7
request
.get('/querystring')
.query('search=Manny')
.query('range=1..5')
.end(function(res){

});

POST/PUT请求

一个典型的json post请求看起来就像下面的那样,设置一个合适的Content-type头字段,然后写入一些数据,在这个例子里只是json字符串:

1
2
3
4
request.post('/user')
.set('Content-Type', 'application/json')
.send('{"name":"tj","pet":"tobi"}')
.end(callback)

因为json非常通用,所以就作为默认的Content-type,下面的例子跟上面的一样:

1
2
3
request.post('/user')
.send({ name: 'tj', pet: 'tobi' })
.end(callback)

或者调用多次.send()方法:

1
2
3
4
request.post('/user')
.send({ name: 'tj' })
.send({ pet: 'tobi' })
.end(callback)

默认发送字符串,将设置Content-type为application/x-www-form-urlencoded,多次调用将会通过&来连接,这里的结果为name=tj&pet=tobi:

1
2
3
4
request.post('/user')
.send('name=tj')
.send('pet=tobi')
.end(callback);

SuperAgent的请求数据格式化是可以扩展的,不过默认支持form和json两种格式,想发送数据以application/x-www-form-urlencoded类型的话,则可以简单的调用.type()方法传递form参数就行,这里默认是json,下面的请求将会postname=tj&pet=tobi内容:

1
2
3
4
5
request.post('/user')
.type('form')
.send({ name: 'tj' })
.send({ pet: 'tobi' })
.end(callback)

注意:form是form-data和urlencoded的别名,为了向后兼容

设置Content-Type

常见的方案是使用.set()方法:

1
2
request.post('/user')
.set('Content-Type', 'application/json')

一个简便的方法是调用.type()方法,传递一个规范的MIME名称,包括type/subtype,或者一个简单的后缀就像xml,json,png这样,例如:

1
2
3
4
5
6
7
8
request.post('/user')
.type('application/json')

request.post('/user')
.type('json')

request.post('/user')
.type('png')

设置接受类型

跟.type()简便方法一样,这里也可以调用.accept()方法来设置接受类型,这个值将会被request.types所引用,支持传递一个规范的MIME名称,包括type/subtype,或者一个简单的后缀就像xml,json,png这样,例如:

1
2
3
4
5
6
7
8
request.get('/user')
.accept('application/json')

request.get('/user')
.accept('json')

request.get('/user')
.accept('png')

查询字符串

当用.send(obj)方法来发送一个post请求,并且希望传递一些查询字符串,可以调用.query()方法,比如向?format=json&dest=/login发送post请求:

1
2
3
4
5
6
request
.post('/')
.query({ format: 'json' })
.query({ dest: '/login' })
.send({ post: 'data', here: 'wahoo' })
.end(callback);

解析响应内容

SuperAgent会解析一些常用的格式给请求者,当前支持application/x-www-form-urlencoded,application/json,multipart/form-data.

JSON/Urlencoded

res.body是解析后的内容对象,比如一个请求响应’{“user”:{“name”:”tobi”}}’字符串,res.body.user.name将会返回tobi,同样的,x-www-form-urlencoded格式的user[name]=tobi解析完的值,也是一样的.

Multipart

nodejs客户端通过Formidable模块来支持multipart/form-data类型,当解析一个multipart响应时,res.files属性就可以用.假设一个请求响应下面的数据:

1
2
3
4
5
6
7
8
9
10
11
--whoop
Content-Disposition: attachment; name="image"; filename="tobi.png"
Content-Type: image/png

... data here ...
--whoop
Content-Disposition: form-data; name="name"
Content-Type: text/plain

Tobi
--whoop--

你将可以获取到res.body.name名为’Tobi’,res.files.image为一个file对象,包括一个磁盘文件路径,文件名称,还有其它的文件属性.

响应属性

响应一般会提供很多有用的标识以及属性,都在response对象里,按照respone.text,解析后的response.body,头字段,一些标识的顺序来排列.

Response text

res.text包含未解析前的响应内容,一般只在mime类型能够匹配text/,json,x-www-form-urlencoding的情况下,默认为nodejs客户端提供,这是为了节省内存.因为当响应以文件或者图片大内容的情况下影响性能.

Response body

跟请求数据自动序列化一样,响应数据也会自动的解析,当为一个Content-Type定义一个解析器后,就能自动解析,默认解析包含application/json和application/x-www-form-urlencoded,可以通过访问res.body来访问解析对象.

Response header fields

res.header包含解析之后的响应头数据,键值都是node处理成小写字母形式,比如res.header[‘content-length’].

Response Content-Type

Content-Type响应头字段是一个特列,服务器提供res.type来访问它,默认res.charset是空的,如果有的话,则自动填充,例如Content-Type值为text/html; charset=utf8,则res.type为text/html,res.charst为utf8.

Response status

响应状态标识可以用来判断请求是否成功,除此之外,可以用SuperAgent来构建理想的restful服务器,这些标识目前定义为:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
var type = status / 100 | 0;

// status / class
res.status = status;
res.statusType = type;

// basics
res.info = 1 == type;
res.ok = 2 == type;
res.clientError = 4 == type;
res.serverError = 5 == type;
res.error = 4 == type || 5 == type;

// sugar
res.accepted = 202 == status;
res.noContent = 204 == status || 1223 == status;
res.badRequest = 400 == status;
res.unauthorized = 401 == status;
res.notAcceptable = 406 == status;
res.notFound = 404 == status;
res.forbidden = 403 == status;

中止请求

可以通过req.abort()来中止请求.

请求超时

可以通过req.timeout()来定义超时时间,然后当超时错误发生时,为了区别于别的错误,err.timeout属性被定义为超时时间,注意,当超时错误发生后,后续的请求都会被重定向.不是每个请求.

基础验证

nodejs客户端可以通过两种方式来达到验证的目的,第一个是传递一个像这样的url,user:pass:

1
request.get('http://tobi:learnboost[@local](/user/local)').end(callback);

第二种是调用.auth()方法:

1
2
3
4
request
.get('http://local')
.auth('tobo', 'learnboost')
.end(callback);

跟随重定向

默认是向上跟随5个重定向,不过可以通过调用.res.redirects(n)来设置个数:

1
2
3
4
request
.get('/some.png')
.redirects(2)
.end(callback);

管道数据

nodejs客户端允许使用一个请求流来输送数据,比如请求一个文件作为输出流:

1
2
3
4
5
6
7
var request = require('SuperAgent')
, fs = require('fs');

var stream = fs.createReadStream('path/to/my.json');
var req = request.post('/somewhere');
req.type('json');
stream.pipe(req);

或者输送一个响应流到文件中:

1
2
3
4
5
6
var request = require('SuperAgent')
, fs = require('fs');

var stream = fs.createWriteStream('path/to/my.json');
var req = request.get('/some.json');
req.pipe(stream);

复合请求

SuperAgent用来构建复合请求非常不错,提供了低级和高级的api方法.

低级的api是使用多个部分来表现一个文件或者字段,.part()方法返回一个新的部分,提供了跟request本身相似的api方法.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
var req = request.post('/upload');

req.part()
.set('Content-Type', 'image/png')
.set('Content-Disposition', 'attachment; filename="myimage.png"')
.write('some image data')
.write('some more image data');

req.part()
.set('Content-Disposition', 'form-data; name="name"')
.set('Content-Type', 'text/plain')
.write('tobi');

req.end(callback);

附加文件

上面提及的高级api方法,可以通用.attach(name, [path], [filename])和.field(name, value)这两种形式来调用.添加多个附件也比较简单,只需要给附件提供自定义的文件名称,同样的基础名称也要提供.

1
2
3
4
5
6
request
.post('/upload')
.attach('avatar', 'path/to/tobi.png', 'user.png')
.attach('image', 'path/to/loki.png')
.attach('file', 'path/to/jane.png')
.end(callback);

字段值

跟html的字段很像,你可以调用.field(name,value)方法来设置字段,假设你想上传一个图片的时候带上自己的名称和邮箱,那么你可以像下面写的那样:

1
2
3
4
5
6
request
.post('/upload')
.field('user[name]', 'Tobi')
.field('user[email]', 'tobi[@learnboost](/user/learnboost).com')
.attach('image', 'path/to/tobi.png')
.end(callback);

压缩

nodejs客户端本身就提供了压缩响应内容,所以你不需要做任何其它事情.

缓冲响应

为了强迫缓冲res.text这样的响应内容,可以调用req.buffer()方法,想取消默认的文本缓冲响应像text/plain,text/html这样的,可以调用req.buffer(false)方法

当缓冲res.buffered标识提供了,那么就可以在一个回调函数里处理缓冲和没缓冲的响应.

跨域资源共享

.withCredentials()方法可以激活发送原始cookie的能力,不过只有在Access-Control-Allow-Origin不是一个通配符(*),并且Access-Control-Allow-Credentials为’true’的情况下才行.

1
2
3
4
5
6
7
8
request
.get('http://localhost:4001/')
.withCredentials()
.end(function(res){
assert(200 == res.status);
assert('tobi' == res.text);
next();
})

异常处理

当发送错误时,SuperAgent首先会检查回调函数的参数数量,当err参数提供的话,参数就是两个,如下:

1
2
3
4
5
6
request
.post('/upload')
.attach('image', 'path/to/tobi.png')
.end(function(err, res){

});

当省略了回调函数,或者回调只有一个参数的话,可以添加error事件的处理.

1
2
3
4
5
6
7
request
.post('/upload')
.attach('image', 'path/to/tobi.png')
.on('error', handle)
.end(function(res){

});

注意:SuperAgent默认情况下,对响应4xx和5xx的认为不是错误,例如当响应返回一个500或者403的时候,这些状态信息可以通过res.error,res.status和其它的响应属性来查看,但是没有任务的错误对象会传递到回调函数里或者emit一个error事件.正常的error事件只会发生在网络错误,解析错误等.

当产生一个4xx或者5xx的http错误响应,res.error提供了一个错误信息的对象,你可以通过检查这个来做某些事情.

1
2
3
4
5
if (res.error) {
alert('oh no ' + res.error.message);
} else {
alert('got ' + res.status + ' response');
}

ps: SuperAgent是一个非常实用的http代理模块,推荐大家使用,之前写了一个爬虫来爬一个xml,结合上async效果还是很不错的。可以看下我 github 上 fork 的一个node学习项目(https://github.com/utopia1991/node-lessons/tree/master/lesson3)