使用Python从Discuz类讨坛批量下载图片

最近在研究爬虫，爬取好多网站的数据，下面就以爬取图片网站照片为例，来让大家学习，希望大家多交流。总的来说爬虫不难，会python的简单语法，会xpath提取网页需要的信息，就可以很快的爬取网站的图片，同时也希望以此来激起大家学习的兴趣。 文章导航一、环境二、源码三、部分源码分析3.1 获取网站html网页数据源码3.2 返回网页源码信息数据3.3 提取网页中自己需要的信息–有多少页3.4 循环进入某一页3.5 创建文件夹，循环进入每一个图片的第二层页面 一、环境 **目标网站：**图片网 **环境：**Python3.0以上版本 windows亲测可以，linux下应该也是没有问题 **第

2个案例。图片批量下载还不简单？带你飞！

免费下图，超级好用，还免费

强力横扫下载网站、贴吧、论坛图片。 小巧绿色 破解仅供学习交流

提示： 右键单击程序标题栏可以查看更多功能或设置 特殊说明: 关于libeay32.dll、ssleay32.dll 这两个文件，OpenSSL Library 是开源的库， 网上到处都可以下载，很多软件都自带这些库，本软件自带的版本是1.0.0.7， 鉴于极个别电脑可能没有安装这些库，所以都打包在一起，防止不能用。 部分杀软可能会误报毒，请将本地病毒库升级到最新；一般升级病毒库后就不会报毒了。 如果大家不放心，可以自行到网上搜索并下载这两个dll文件(一般是0.9.0.*版本的)， 安装到system32系统文件夹（或者程序根目录）里，原则上0.9.0.*版本的也可以使用。 功能介绍: 1，淘图宝是一款功能强大的产品详情页图片下载工具，可以帮助店家轻松下载别的店铺的产品图片，如主图、详细页面图，颜色图等。 该软件支持提取采集1688、淘宝、天猫、聚划算、速卖通、蘑菇街、美丽说等宝贝产品图片。 A 为方便淘宝宝贝上架、photoshop操作，下载的图片会下载到 桌面\DPicture 文件夹 B 双击列表可以在浏览器中查看任意图片的网址链接 2，下载完毕后，即可一键批量生成符合手机详情页要求的图片，一键生成，高效快捷.长图能智能切割，省时省力 A 生成的图片质量能任意调节， B 生成的图片清晰度，效果绝非淘宝上的收费插件能比，高质量、高清晰度的手机详情图片可以提高您店铺的转换率 C jpg、jpeg、gif、bmp、png 等网络常用格式的图片均支持直接转换成手机详情页图片，宽度可调 3，纯绿色软件，软件无需安装，解压后即可运行试用，绿色环保不写注册表，不想使用时直接删除文件夹即可，不留任何痕迹。 4，独特软件内核。即使频繁下载服务器有限制，也不需要重启电脑、重启路由器、清空浏览器COOKIES等无脑式的操作。 5，支持32位与64位的 Windows XP,Vista,7,8,10 （完美支持最新的Win10系统） 更新摘要： 1，登录方式以及程序界面做了调整，程序更加稳定快捷 2，增加拍拍产品详情页图片批量下载的功能 3，修复速卖通产品提取的一处BUG 4，增加配置文件，程序更加易用 5，完美支持最新的Win10系统（32位与64位均支持）， 6，增加美丽说、蘑菇街产品详情页图片批量下载的功能 7，为方便操作，设置面板加入了窗体置顶的功能 8，图片处理重新作了布局，可以自定义需要转换的输入、输出文件夹的路径，支持文件夹拖拽 9，标题栏添加了版本号，方便大家更新 10,让窗口置顶功能更加灵活方便 11,图片转换过程中加入了回显 12，算法作了较大的优化 提取速度相比以前更快

一款专门用来下载网店中商品图片的软件，目前的电商图片助手可以将京东、1688阿里、衣联网、一号店、易贝、拍拍、速卖通、淘宝、天猫、国际天猫、美丽说、苏宁易购、蘑菇街等网店的图片批量下载到本地并分类保存，可以整店、整页或选择需要的分类下载，同时还有边下载边添加水印、智能拼接成长图、智能断点续传、智能过滤重复图片等等的人性化功能。而且还可以将淘宝、天猫、京东、阿里的商品导出CSV数据包，导入淘宝助理后只要稍微编辑就可以轻松发布宝贝。是网络贸易的辅助能手。

这个软件方便图片批量下载，真是有效.................................