一、思路
最近做了一个网站用到了从网址爬取天猫和淘宝的商品信息，首先看了下手机端的网页发现用的react，不太了解没法搞，所以就考虑从PC入口爬取数据，但是当爬取URL获取数据时并没有获取价格，库存等的信息，仔细研究了下发现是异步请求了另一个接口，但是接口要使用refer才能获取数据，于是就通过以下方式写了一个简单的爬虫，用于爬取商品预览图和商品的第一个分类的价格、库存等。
二、实现
代码如下：
function crawlUrl($url){
import('PhpQuery.Curl');
$curl=new \Curl();
$result = $curl->read($url);
2021-07-12 19:33:13
51KB
1
官网上的惠普P1108型号打印机的驱动安装根本没反应，弄了好久，终于找到了一个能用的驱动安装包，这个可以完美运行。（下载积分超过10分私信一下我修改回来）
2021-07-12 19:29:42
190.91MB
1
HP MSA 2040 CLI Reference Guide For firmware release GL200 or later.
This guide provides information about managing an HP MSA 2040 storage system by using its command-line interface (CLI).
2021-07-12 11:36:39
2.38MB
1
HP MSA 2040存储用户指南中文版，用于固件版本GL200或者更高版本，介绍控制器的初始硬件设置，供熟悉服务器和计算机网络，网络管理，存储系统安装和配置，存储区域网络管理以及相关协议的存储系统管理员使用。
2021-07-12 11:36:01
5.49MB
1
HP 54645A Oscilloscope and HP 54645D Mixed-Signal Oscilloscope User and Service Guide
2021-07-09 18:03:09
2.89MB
1
HP_M153_M154_series_20200612固件硒鼓，降级处理，老固件,内附升级方法，亲测可用
2021-07-09 09:01:31
13.92MB
HP b110i raid卡 Centos Redhat Drivers
2021-07-08 17:01:52
134KB
1
HP Performance Advisor
Maximize your workstation performance
2021-07-05 16:16:03
11.77MB
1