scrapy-zhihu-user
介绍
毕业设计练习项目，在Python3环境下，使用scrapy借助scrapyd，scrapy_redis，gerapy等实现分布式爬取知乎用户信息，然后将信息存储在mongodb中。
在本地Ubuntu16.04和阿里云Ubuntu14.04测试通过。
使用的库&&反爬
整体框架为scrapy,官网和使用方法见.
分布式和存储去重使用scrapy_redis.
部署使用和,scrapyd安装和使用办法查看,gerapy是免去命令行操作远程部署和查看，是崔庆才大大的作品，本项目也是基于他的视频来做的，gerapy介绍和使用方法在这里.
防反爬措施1:动态修改useragent(使用fake_useragent库),安装和使用看这里
防反爬措施2:使用IPProxyPool辅助爬取的免费代理，借助random动态更换IP(可使用率极低，推荐收费代理)。安
2021-09-18 15:31:51
15KB
1
瑞萨RL78族单片机软件用户手册，此手册主要查阅对象为嵌入式单片机软件和硬件研发人员。此手册可帮助研发人员更好的进行瑞萨单片机内容的开发。
2021-09-18 11:33:22
1.45MB
1
SOLiD System 2.0用户手册
2021-09-16 13:01:41
292.41MB
1
Startup with Vector SLP4 User Manual---Vector Davinci官方帮助配置手册
2021-09-16 11:42:54
8.83MB
1
Aeroflex(艾法斯)公司开发的TM500网络测试仪在TD-LTE基站研发、生产和现场测试市场占据了主要的市场份额，LTE基站品牌制造商(如华为、中兴、大唐、诺基亚-西门子、阿尔卡特-朗讯、爱立信等)都在使用TM500开发产品。
2021-09-15 19:01:51
4.62MB
1
terraform-aws-cognito-user-pool：用于创建Amazon Cognito用户池，配置其属性和资源（例如应用程序客户端，域，资源服务器）的Terraform模块。 Amazon Cognito用户池提供了一个安全的用户目录，可扩展到数亿用户
2021-09-15 17:34:30
30KB
1
Agilent EasyEXPERT User' Guide.For Agilent B1500A Users and Agilent B1505A Users.
2021-09-15 12:44:16
5.71MB
1