request 和 superagent 模块都可以拿来做爬虫，怎么选择呢 - CNode技术社区

request和superagent 模块都可以拿来做爬虫，怎么选择呢?有点迷糊了

lzq920 1楼•1 个月前

做爬虫首选py

cnlile 2楼•1 个月前

爬虫用Scrapy做过，觉得还可以的，推荐一下。。。

souldjl 3楼•1 个月前作者

@lzq920 e，这不是nodejs社区吗

souldjl 4楼•1 个月前作者

@cnlile @lzq920 e，这不是nodejs社区吗

JZLeung 5楼•1 个月前

我用的 request-promise 还不错，加上 cheerio

然后用的是 egg.js 的定时任务定时爬取。

yongjun925 6楼•1 个月前

superagent可以使用superagent.agent();自动处理cookie，包装的cookiejar。在需要登录后爬取数据的，很有用

souldjl 7楼•1 个月前作者

@yongjun925 哦哦，怎么区分呢

回到顶部