请问一下有没有用node写的爬取淘宝商品的代码?
需求是通过一个或多个淘宝商品的链接,爬取到这个商品的信息,包括详情,sku等等。本人没有接触到爬虫,求分享一下,谢谢。
4 回复
淘宝大部门信息是通过异步接口获取的 直接请求页面是拿不到那些信息的 可以使用容器运行页面然后注入js脚本的方式获取。 我使用electronjs 写过一个爬淘宝 JD商品图片的桌面应用.就是使用的脚本注入
@xuanxia 我不会爬虫的…项目有这个功能。
详情和SKU容易,某些字段不容易(不是说无法获取,只是技术成本会高),比如各种价格,优惠券,促销信息
淘宝好像限制ip要手动验证的吧