摘 要 随着社会经济的快速发展，城镇化的加速建设，房地产交易越来越火，尤其二手房交易市场居高不下，互联网涌现大批网上二手房交易网站，但是由于提供的房源质量参差不齐，对于个人用户的需求不够精确，无法做到房源精准投放，因此需要实现二手房房源推荐系统来解决用户需求，而房源推荐系统的实现首要就是需要获得足够多的房源信息，所以本毕设通过实现二手房数据爬取系统来爬取房源数据，为房源推荐系统提供数据支持。 本系统使用多线程多端爬虫的优势，设计一个基于Redis的分布式主题爬虫。本系统采用Scrapy爬虫框架来开发，使用Xpath网页提取技术对下载网页进行内容解析，使用Redis做分布式，使用MongoDB对提取的数据进行存储，使用Django开发可视化界面对爬取的结果进行友好展示，设计并实现了针对链家网二手房数据的分布式爬虫系统。 经过开发验证，本系统可以完成对链家二手房房源数据的分布式爬取，可以为房源推荐系统提供数据支持，也可以为数据分析师提供二手房数据分析的数据源。 关键词：二手房：分布式爬虫：Scrapy：可视化

毕业设计论文-源码-WD型采煤机右摇臂壳体的加工工艺规程及数控编程(设计图纸、任务书)字数：49436字.zip

毕业设计论文-源码-W型采煤左牵引部机壳的加工工艺规程及数控编程(设计图纸、任务书)字数：46648字.zip

毕业设计论文-源码-Z90型电动阀门装置及数控加工工艺(设计图纸、任务书、实习报告、答辩PPT)字数：11894字.zip

毕业设计论文-源码-Φ146.6药瓶注塑模设计(设计图纸、任务书、开题报告)字数：16449字.zip

毕业设计论文-源码-半精镗及精镗气缸盖导管孔组合机床(设计图纸、任务书、实习报告、开题报告)字数：21140字.zip

毕业设计论文-源码-冰箱调温按钮塑模设计(设计图纸、任务书)字数：12310字.zip

毕业设计论文-源码-采煤(设计图纸、说明书)字数：78995字.zip

毕业设计论文-源码-柴油机汽缸机械加工及夹具设计(设计图纸、任务书、进度表)字数：20953字.zip

毕业设计论文-源码-车床数控改造(设计图纸)字数：12362字.zip