掌上电脑
使用从第三方网站刮取的数据来分析中国P2P行业(使用从第三方数据网站爬取的数据分析中国P2P行业现状)
关于数据来源
本项目写于2017年七月初,主要使用Python爬取网贷之家以及人人贷的数据进行分析。网贷之家是国内最大的P2P数据平台,人人贷国内排名前二十的P2P平台。
数据爬取
抓包分析
抓包工具主要使用chrome的开发者工具网络一栏,网贷之家的数据全部是ajax返回json数据,而人人贷既有ajax返回数据也有html页面直接生成数据。
请求实例
从数据中可以看到请求数据的方式(GET或POST),请求头以及请求参数。 从请求数据中可以看到返回数据的格式(此例中为json)
1