node怎么爬取墙外的网站数据呢
试过shadowsocks,赛风等等软件了,都还是 ETIMEDOUT,这个有什么办法吗
5 回复
买个海外的服务器,或者上海外的代理库
要配置 http agent 来让 node 使用代理
买的海外的服务器爬取的
代理和 vpn 不一样的,要么用 vpn, 要么通过 proxifier 这类软件让所有请求通过代理,要么用海外的服务器
request
模块的proxy
了解下,顺便安利一下我写的爬虫,也是爬国外网站的资源。