参考测试网站： http://www.pythonscraping.com/pages/warandpeace.html 每个网站都有层叠样式表（Cascading Style Sheet：CSS） CSS让HTML元素呈现出差异化，是那些具有完全相同修饰的元素呈现出不同的样式。比如，有一些标签如下： 还有一些是这样： 我们显然可以根据class属性的值进行爬取

本教程将实际操作使用Python Scrapy框架爬取传智播客教师页面教师的个人信息。 爬取页面网址：http://www.itcast.cn/channel/teacher.shtml#ac Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。 Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如BaseSpider、sitemap爬虫等，最新版本又提供了web2.0爬虫的支持。 Scratch，是抓取的意思，这个Python的爬虫框架叫Scrapy，大概也是这个意思吧，就叫它：小刮刮吧。 小刮刮是一个为遍历爬行网站、分解获取数据而设计的应用程序框架，它可以应用在广泛领域：数据挖掘、信息处理和或者历史片（历史记录）打包等等。 尽管小刮刮原本是设计用来屏幕抓取（更精确的说，是网络抓取）的目的，但它也可以用来访问API来提取数据，比如Amazon的AWS或者用来当作通常目的应用的网络蜘蛛。

网络爬虫，即Web Spider，是一个很形象的名字。 把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。 网络蜘蛛是通过网页的链接地址来寻找网页的。 从网站某一个页面（通常是首页）开始，读取网页的内容，找到在网页中的其它链接地址，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。 如果把整个互联网当成一个网站，那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。

什么叫爬虫：简单的说就是你以后不需要再在网页上一条一条的复制了 其实他的主要服务对象是“搜索引擎”，比如：google、jack爱问、必应、雅虎中国、搜狗、搜搜、百度、中搜、有道 别名：蜘蛛、蚂蚁…… 一个IP对应一个域名

下面我们一起尝试一下爬取内涵段子吧 http://www.neihan8.com/article/list_5_1.html 打开之后，不难看到里面一个一个灰常有内涵的段子，当你进行翻页的时候，注意url地址的变化。 你会发现规律： 第一页url: http://www.neihan8.com/article/list_5_ 1 .html 第二页url: http://www.neihan8.com/article/list_5_ 2 .html 第三页url: http://www.neihan8.com/article/list_5_ 3 .html 第四页url: http://www.neihan8.com/article/list_5_ 4 .html 这样我们的url规律找到了，要想爬取所有的段子，只需要传递一个参数即可。

这是五邑大学2020年python网络协议分析课程的大作业源代码，完全自主设计编写，没有任何bug，可以正常运行，已经验收，成绩优秀，可以拿去参考，有不懂的地方可以私聊咨询哦。

python从入门到精通视频（全60集）+崔庆才Python 3开发网络爬虫视频教程+源代码

Python 网络编程简单实例，使用socket()函数，bind()函数，connect()函数，实现TCP 服务端，客户端的建立，资料包含server.py和client.py文件，两个py文件在2个终端分别运行，二者可互相通信，分别用网络调试助手也可以单独通信，，实例仅供参考

基于python3.8的局域网端口扫描，利用TCP握手，检测端口的开放情况，注释详细，简单易懂。里面包括源码和可执行程序。

Python网络编程，第二版中文，高清晰版本，有需要的请自行下载。。。。。