18万条数据,走http请求获取问题
先不说为什么走http,老板让我干啥我干啥。
每一条数据还是有点大。 每次请求一百条数据,大约9秒; 一千条数据的话就要40-几百秒了,这时就是看网络环境等各种因素了。
18万条 = 1800* 100 = 180* 1000;
我该是每次请求较少的条数,增加请求次数呢? 还是增加请求条数,减少请求次数?
1)哪种方式好呢? 2)使用for+setTimeout好呢,还是通过async.mapseries+深沉嵌套好呢 3)一下并发请求肯定不行吧 4)这种情况有啥推荐的方法