如何使用PHP高效爬取天猫及淘宝商品信息？

本文共计984个文字，预计阅读时间需要4分钟。

一、思路+近期做了个网站，用到了从网址爬取天猫和京东的商品信息，首先看了下手机端网页，用的react框架，不太懂怎么搞，所以考虑从PC端入口爬取数据，但爬取URL获取数据时遇到了问题。

一、思路

最近做了一个网站用到了从网址爬取天猫和淘宝的商品信息，首先看了下手机端的网页发现用的react，不太了解没法搞，所以就考虑从PC入口爬取数据，但是当爬取URL获取数据时并没有获取价格，库存等的信息，仔细研究了下发现是异步请求了另一个接口，但是接口要使用refer才能获取数据，于是就通过以下方式写了一个简单的爬虫，用于爬取商品预览图和商品的第一个分类的价格、库存等。