只有你想不到，没有玩不到

spiderflow是一个高度灵活可配置的爬虫平台。作为新一代爬虫平台，它以图形化方式定义爬虫流程，不写代码即可完成爬虫。 特性： 支持Xpath/JsonPath/css选择器/正则提取/混搭提取 支持JSON/XML/二进制格式 支持多数据源、SQL select/selectInt/selectOne/insert/update/delete 支持爬取JS动态渲染(或ajax)的页面 支持代理 支持自动保存至数据库/文件 常用字符串、日期、文件、加解密等函数 支持插件扩展(自定义执行器，自定义方法） 任务监控,任务日志 支持HTTP接口 支持Cookie自动管理 支持自定义函数

python抓取百度百科1000条记录,只要一个百度百科的入口链接:如: root_url = "http://baike.baidu.com/view/9936357.htm".入口文件是spider_main.py

weixinScraper golang从搜狗爬取微信最新文章, 并从搜索引擎验证原创度等.

Java爬虫爬取某招聘网站招聘信息 功能展示 1.需求爬取的网站内容 2.实现流程 2.1数据采集 2.2页面解析 2.3数据存储 详情：https://blog.csdn.net/qq_33037637/article/details/124947052

可以获取新闻url，标题，新闻发布时间，每日可以根据windows任务定时启动爬取当日新闻。原创简单易懂好用。

浅谈网络爬虫中广度优先算法和代码实现.pdf

疫情数据可视化分析系统，使用python编写的，用爬虫去爬取数据，然后使用pymysql存入MySQL数据库，然后使用flask搭建web框架，最后使用pyecharts进行可视化。

python3.0爬虫抓取北京天气json

一个用于抓取新浪股票数据的 matlab 工具箱。该工具箱开源，可以好好学习学习。