python模拟登陆网页主要使用到urllib、urllib2、cookielib及BeautifulSoup等基本模块，当然进阶阶段我们还可以使用像requests等更高级一点的模块。其中BeautifulSoup模块在匹配html方面，可以很好的代替re，使用起来更方便，对于不会使用正则的人来说是福音。
本文使用python2.7
原理
模拟登陆前，我们需要先知道csdn是如何登陆的。我们通过google chrome浏览器先来分析下：
1.chrome浏览器用F12或ctrl+shift+I启动开发者工具，并访问csdn登陆页面，在开发者工具中对”Preserver log”选项打勾，表
2021-11-20 11:24:04
80KB
1
10.1 会话状态概述 HTTP协议的“无状态”（Stateless）特点带来了一系列的问题。特别是通过在线商店购物时，服务器不能顺利地记住以前的事务就成了严重的问题。它使得“购物篮”之类的应用很难实现：当我们把商品加入购物篮时，服务器如何才能知道篮子里原先有些什么？即使服务器保存了上下文信息，我们仍旧会在电子商务应用中遇到问题。例如，当用户从选择商品的页面（由普通的服务器提供）转到输入信用卡号和送达地址的页面（由支持SSL的安全服务器提供），服务器如何才能记住用户买了些什么？ 这个问题一般有三种解决方法： Cookie。利用HTTP Cookie来存储有关购物会话的信息，后继的各
2021-11-20 10:06:14
85KB
1
爬取网站时经常会遇到需要登录的问题，这是就需要用到模拟登录的相关方法。python提供了强大的url库，想做到这个并不难。这里以登录学校教务系统为例，做一个简单的例子。
首先得明白cookie的作用，cookie是某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据。因此我们需要用Cookielib模块来保持网站的cookie。
这个是要登陆的地址 http://202.115.80.153/ 和验证码地址 http://202.115.80.153/CheckCode.aspx
可以发现这个验证码是动态更新的每次打开都不一样，一般这种验证码和cookie是同步的。其次
2021-11-20 00:51:36
184KB
1
很早以前就写了 相关功能，但一直没加界面。最近把界面加上了.
可查看:
1,ie 浏览历史 ,cookie ,收藏夹
其中： ie 浏览历史 清空删除浏览记录后，仍能查看到相关内容...
2,chrome 浏览历史 ,cookie ,收藏夹 ,下载记录 ,关键字搜索.
3,firefox(由于firefox 8.0版本以上已不能获取，所以暂时禁用相关功能)
2021-11-17 11:51:07
432KB
1
曾尝试各种方法，没有效果。使用的是函数requests.get()，已写header、cookie、User-Agent，也写了rsp.encoding = rsp.apparent_encoding。
但是仍是爬取不了。奇怪的同一个网站同一个榜单，只是页数不同，前若干页能爬取，后若干页就爬取不了，一度怀疑是不允许爬。
最后终于发现原因！
因为Cookie找错了（kao！！！！！）
注意要用这里的cookie！
（下图是Chrome的开发者工具视图）
用requests.get()的标准格式：
【仅为个人总结】
# 伪装成浏览器，防止封ip
headers = {
'User
2021-11-14 16:51:11
304KB
1
简单而强大的Cookie编辑器，可让您快速创建，编辑和删除Cookie，而无需离开标签页。
Cookie-Editor设计为具有易于使用的界面，可让您执行大多数标准的cookie操作。
它是开发和测试网页或什至手动管理Cookie的理想选择，以确保您的隐私。
您可以轻松地为您正在访问的当前页面创建，编辑和删除Cookie。
还有一个方便的按钮可以批量删除当前页面的所有cookie。
您也可以以文本格式导入和/或导出cookie，以方便共享或备份。
这是完美的cookie编辑器。
对于所有功能请求或错误报告，请访问Github存储库并填写问题https://github.com/Moustachauve/cookie-editor
支持语言:English
2021-11-12 02:00:56
242KB
1
语言:中文 (简体)
快捷添加 cookie
方便用户针对当前的域名添加 cookie，并且可以保存用户数据在用户本地，方便用户以及开发者使用。
2021-11-12 02:00:32
132KB
1
安卓QQ空间cookie提取协议源码，资源来源于网络，下载请自行查毒，谨慎调试运行，防止恶意代码！
2021-11-12 00:57:12
233KB
1