request 和 superagent 模块都可以拿来做爬虫，怎么选择呢

问答

Ssouldjl发布于8 年前最后回复8 年前|7 回复3331 浏览0 收藏

request 和 superagent 模块都可以拿来做爬虫，怎么选择呢?有点迷糊了

lzq920#1·8 年前

做爬虫首选py

cnlile#2·8 年前

爬虫用Scrapy做过，觉得还可以的，推荐一下。。。

souldjl#3·8 年前

@lzq920 e，这不是nodejs 社区吗

souldjl#4·8 年前

@cnlile @lzq920 e，这不是nodejs 社区吗

JZLeung#5·8 年前

我用的 request-promise 还不错，加上 cheerio

然后用的是 egg.js 的定时任务定时爬取。

yongjun925#6·8 年前

superagent可以使用superagent.agent();自动处理cookie，包装的cookiejar。在需要登录后爬取数据的，很有用

souldjl#7·8 年前

@yongjun925 哦哦，怎么区分呢

参与回复

登录后即可参与回复。登录

request 和 superagent 模块 都可以拿来做爬虫，怎么选择呢