房天下房屋信息爬虫

上传者: daiguangleifly | 上传时间: 2021-06-17 15:53:29 | 文件大小: 14KB | 文件类型: ZIP
Python 2.7,Scrapy 1.4.0 ,Scrapy_redis 0.6.8, Redis 3.2,用来做数据缓存和去重。MongoDB 3.4.3 ,用来存储最终爬取到的房源数据。pymongo 3.5.1,Python操作MongoDB的工具库。

文件下载

资源详情

[{"title":"( 13 个子文件 14KB ) 房天下房屋信息爬虫","children":[{"title":"fangtx-master","children":[{"title":"main.py <span style='color:#111;'> 509B </span>","children":null,"spread":false},{"title":"scrapy.cfg <span style='color:#111;'> 276B </span>","children":null,"spread":false},{"title":"fangtianxia_rent","children":[{"title":"models.py <span style='color:#111;'> 2.19KB </span>","children":null,"spread":false},{"title":"middlewares.py <span style='color:#111;'> 1.87KB </span>","children":null,"spread":false},{"title":"pipelines.py <span style='color:#111;'> 3.49KB </span>","children":null,"spread":false},{"title":"spiders","children":[{"title":"fetch_info.py <span style='color:#111;'> 3.85KB </span>","children":null,"spread":false},{"title":"fangtx.py <span style='color:#111;'> 9.65KB </span>","children":null,"spread":false},{"title":"__init__.py <span style='color:#111;'> 161B </span>","children":null,"spread":false},{"title":"fangtx_rent.py <span style='color:#111;'> 5.41KB </span>","children":null,"spread":false}],"spread":true},{"title":"items.py <span style='color:#111;'> 1.14KB </span>","children":null,"spread":false},{"title":"__init__.py <span style='color:#111;'> 0B </span>","children":null,"spread":false},{"title":"settings.py <span style='color:#111;'> 3.15KB </span>","children":null,"spread":false}],"spread":true},{"title":".gitignore <span style='color:#111;'> 12B </span>","children":null,"spread":false}],"spread":true}],"spread":true}]

评论信息

免责申明

【只为小站】的资源来自网友分享,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论 【只为小站】 经营者是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二条之规定,若资源存在侵权或相关问题请联系本站客服人员,zhiweidada#qq.com,请把#换成@,本站将给予最大的支持与配合,做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明