这里是计算机专业Springboot2-毕业设计100套之一的网上图书商城--论文等，希望能对大家有所帮助哦！
2023-04-12 20:32:50
28.62MB
1
采用Spring Boot、MySQL等技术栈构建的一个网上图书商城，包括后端代码+前端代码+数据库。整个开发过程首先对系统进行需求分析，得出系统的主要功能。接着对系统进行总体设计和详细设计。总体设计主要包括系统功能设计、系统总体结构设计、系统数据结构设计和系统安全设计等；详细设计主要包括系统数据库访问的实现，主要功能模块的具体实现，模块实现关键代码等。最后对系统进行功能测试，并对测试结果进行分析总结。 包括程序毕设程序源代码一份，数据库一份，完美运行。如有问题可私信我
2023-01-06 19:37:07
47.52MB
1
使用scrapy创建爬虫程序、使用BeautifulSoup爬取数据、爬取关联网页数据、使用管道存储数据
本项目涉及一个包含多个网页的图书网站，我们使用scrapy爬取各个网页的数据，实现了爬取图书网站数据的爬虫程序。
scrapy是一个优秀的分布式爬取框架，它规定了一系列的程序规则，例如，使用items.py定义数据的格式，使用pipelines.py实现数据的存储，使用spider.py实现数据的爬取，使用settings.py规定各个模块之间的联系，对复杂的爬虫程序进行模块化管理。我们只需按规则填写各个模块即可，各个模块的协调工作由scrapy自动完成。而且scrapy支持使用XPath与CSS方法查找网页数据。使用scrapy可以高效地爬取大多数网站的数据。
但是实际上有些网站的数据是使用JavaScript管理的，一般的scrapy并不能执行JavaScript程序，在后面的项目中将介绍能执行JavaScript程序的爬虫程序技术。
2022-12-08 09:25:38
4.92MB
1