用 Node 做爬虫时有带 cookie 的请求怎么破?
简单的说,就想请求一个 qq 好友空间的页面,获取空间 title,代码如下:
var cheerio = require('cheerio');
var superagent = require('superagent');
superagent
.get('http://user.qzone.qq.com/xxx')
.set('Cookie', 'xxx')
.end(function (err, sres) { // callback
// 常规的错误处理
if (err) {
console.error(err);
}
var $ = cheerio.load(sres.text);
var ans = $('#top_head_title').text();
console.log(ans);
});
其中,第一个 xxx 是好友 qq 号,第二个 xxx 是我访问好友空间页面时,chrome Network 面板下 Doc 文件获取时的 cookie,但是 node 下并没有输出,不知道是哪里姿势不对,恳请指导下,谢谢大家!