个人无聊时写的一个爬取小说网站小说及章节目录的爬虫示例，比较简单，但会对一些java初学者有一定的启发作用，提高他们对java方面的学习、工作兴趣。

爬虫爬取网易汽车车型库【Java代码】不同品牌/车标（共175个车标）下不同车系（共1650个系列）的的图片（各八张）

人工智能-搜索引擎

人工智能-搜索引擎

解决Fiddler提示creation of the root certificate was not successful

为了收集半身靶的图片作为训练数据集，借鉴了网络上的Python爬虫程序，通过json格式，爬取某搜索引擎的图片，可以设定爬取图片尺寸和数量，这样就可以进行数据清洗和数据标注了，用来进行模型训练没有问题了。

只需传入url即可爬取企查查专利板块里各专利的详细信息、摘要、说明书部分，并将结果存入mysql数据库。

扫描 一个简单的爬虫脚本，实现批量识别目标是否使用了cdn服务。 基于“站长之家”的多地ping功能服务，利用爬虫实现批量识别使用了CDN的站点。 环境初始化 步骤一：下载谷歌浏览器以及对应版本的驱动器（ ）或下载云盘链接（ （访问码：xlt7）） 步骤二：解压缩压缩包，将目录\ Chrome \ Application配置到系统环境变量；放入chromedriver.exe文件放置python3目录下；配置成功后，当CMD输入google-chrome可开启谷歌浏览器。 步骤三：pip3安装要求 使用方法：在targets.txt文件中，逐行输入需要检测的域名，然后运行cdnScan.py即可。

需修改output_file变量 东方财富网 + 腾讯证券 import re import requests import traceback from bs4 import BeautifulSoup def getHtmlText(url): try: r = requests.get(url, timeout = 30) r.raise_for_status r.encoding = r.apparent_encoding return r.text except: print(访问失败

zhihu 仿照知乎做的一个Java web项目，是一个sns+资讯的web应用。使用SpringBoot+Mybatis+velocity开发。数据库使用了redis和mysql，同时加入了异步消息等进阶功能，同时使用python爬虫进行数据填充。 内容包括： 开发工具和Java语言介绍 Spring入门，模板语法和渲染 数据库交互iBatis集成 用户注册登录管理 问题发布，敏感词和js标签过滤，问题广场 评论中心，站内信 Redis入门以及Redis实现赞踩功能 异步设计和站内邮件通知系统 sns关注功能，关注和粉丝列表页实现 timeline实现 python语法简介，pip工具介绍 python爬虫实现数据抓取和导入 站内全文搜索 项目测试和部署，课程总结回顾 quick-start 项目基础配置 创建git仓库，本地配置idea并测试pull和push。 创建SpringBoo