重庆链家二手房可视化项目压缩包的完整项目,里面包含登录界面的创建,并且后端连接了数据库,可以通过数据库来进行登录,登录后直接跳转到主界面,且主界面运用了matplotlib包,将数据采用图表的方式呈现在了pyqt5创建好的图形上,从一定意义上来将,实现了数据的可视化,这里需要下载后需要修改一些数据库名称,用户名,密码以及数据表,需要自己首先创建一个有用户名与密码的数据表
2022-09-14 16:11:01 3.17MB python pyqt5
1
摘 要 随着社会经济的快速发展,城镇化的加速建设,房地产交易越来越火,尤其二手房交易市场居高不下,互联网涌现大批网上二手房交易网站,但是由于提供的房源质量参差不齐,对于个人用户的需求不够精确,无法做到房源精准投放,因此需要实现二手房房源推荐系统来解决用户需求,而房源推荐系统的实现首要就是需要获得足够多的房源信息,所以本毕设通过实现二手房数据爬取系统来爬取房源数据,为房源推荐系统提供数据支持。 本系统使用多线程多端爬虫的优势,设计一个基于Redis的分布式主题爬虫。本系统采用Scrapy爬虫框架来开发,使用Xpath网页提取技术对下载网页进行内容解析,使用Redis做分布式,使用MongoDB对提取的数据进行存储,使用Django开发可视化界面对爬取的结果进行友好展示,设计并实现了针对链家网二手房数据的分布式爬虫系统。 经过开发验证,本系统可以完成对链家二手房房源数据的分布式爬取,可以为房源推荐系统提供数据支持,也可以为数据分析师提供二手房数据分析的数据源。 关键词:二手房:分布式爬虫:Scrapy:可视化
2022-08-30 13:01:41 1.06MB
1
地产价格数据集。链家网站抓取。2011-2016. 地产价格数据集。链家网站抓取。2011-2016.
2022-06-19 20:16:42 3.31MB 112
1
爬虫代码,使用python,xpath,爬取链家租房信息等,存储到tet文档中。
2022-06-16 14:21:53 2KB python
1
house_spider Lianjia house spider链家二手房爬虫~ Springboot + Webmagic + Mysql + Redis 简介 - 基于Java8 +、开源爬虫框架WebMagic、Springboot的一个链家爬虫,上手即用,可以指定需要爬取的城市名称、或者爬取全国。 - 数据存Mysql,默认根据搜索城市+日期自动建表,如搜索“南京”,则会通过JDBC新建表:“南京_20191127” - 没有用WebMagic的Pipeline来存DB,而是直接用JDBC存的,默认爬虫线程数为1,每翻页1页批量插入Mysql。 - 由于链家限制爬取页数为100页,所以一个城市下,先查出所有行政区,再遍历行政区下的所有街道,以每个街道为单位,进行最大100页的爬取,这样基本上能爬下城市的所有房源数据。(部分别墅、车位直接忽略没存DB) 使用 基础依赖:安装mysq
2022-05-28 23:58:23 80KB Java
1
摘 要 随着社会经济的快速发展,城镇化的加速建设,房地产交易越来越火,尤其二手房交易市场居高不下,互联网涌现大批网上二手房交易网站,但是由于提供的房源质量参差不齐,对于个人用户的需求不够精确,无法做到房源精准投放,因此需要实现二手房房源推荐系统来解决用户需求,而房源推荐系统的实现首要就是需要获得足够多的房源信息,所以本毕设通过实现二手房数据爬取系统来爬取房源数据,为房源推荐系统提供数据支持。 本系统使用多线程多端爬虫的优势,设计一个基于Redis的分布式主题爬虫。本系统采用Scrapy爬虫框架来开发,使用Xpath网页提取技术对下载网页进行内容解析,使用Redis做分布式,使用MongoDB对提取的数据进行存储,使用Django开发可视化界面对爬取的结果进行友好展示,设计并实现了针对链家网二手房数据的分布式爬虫系统。 经过开发验证,本系统可以完成对链家二手房房源数据的分布式爬取,可以为房源推荐系统提供数据支持,也可以为数据分析师提供二手房数据分析的数据源。 关键词:二手房:分布式爬虫:Scrapy:可视化
2022-05-17 22:35:47 1.77MB Python Scrapy 爬虫 链家二手房数据
08CMS房产系统里面一个全景插件,可以实现全景看房功能,这个大家应该有了解,在手机旁就可以实现360度全景看房体验,另外我们还有火车头房源采集工具插件,第三方,还有适合08CMS的链家模板插件,安装使用遇到问题找Q:1399761800
链家爬虫,Python版,很久前的代码,可以学习参考,适合入门的小伙伴
2022-04-12 20:35:05 461KB 链家爬虫
1
简单的爬虫,爬取上海地区链家挂牌二手房信息
2022-04-11 20:23:38 7KB Python开发-Web爬虫
1