火车头数据信息采集器模块 智能文章采集工具助手 无需编写采集规则【99%以上的网页通用】
效果截图http://www.a5ymg.cn/1412.html
【HTML正文提取算法】提取99.99%以上的新闻类文章,包括博客,论坛等,无需编写采集规则
实测99%以上的网页,只要文章内容大于30个汉字(你可以自己设置,30个是最适合的) 并且出现句号,就可以提取出现,你可以填上一个框架内出现XX内容就为正文,当然这是不支持分页的.
理论上讲不用设置任何项目,只需提供源码即可!比火车头还方便,但速度可能慢了一丁点
2021-06-06 14:04:18
343KB
可以采集某作者所有作品（含作者喜欢作品）、单个视频作品、某话题挑战下指定数量作品、使用某音乐的指定数量作品。
主要是为了便于作品下载的管理进行了分别保存，同时检测作者、话题挑战、音乐的作品的更新，有新作品时仅下载新作品。
使用过本人前面的“批量采集抖音作品”工具的，控制台的新版本工具可自动迁移数据，当然你也可以继续使用以前的工具。
不再重复介绍了，在这个帖子下载过旧版本工具的自然知道怎么使用。压缩包里也有说明和短链接获取图片及控制台操作使用录像。
2021-05-09 09:02:03
41.84MB
1
中国外贸数据爬取系统，由python开发，实现每日外贸数据的采集和更新。
压缩包内为EXE文件，解压即可使用。
2021-05-04 17:03:04
42.35MB
1
用python实现百度PC端关键词覆盖率的查询
作者：brooks
公众号：布鲁的python
一、概述
1. 当我们要了解一批关键词的操作手法的时候，最简单的方法就是学习一下那些排名好的竞争对手的操作方
法。然后去模仿他们的做法，那么我们就需要拿这批关键词去百度进行搜索，然后提取出排名前面的竞争对
手的网址。
2. 当我们想了解一下自有网站在某些关键词的排名情况的时候，也是需要一个个关键词的去进行查询，然后提
取出自己网站的排名和对应的地址。
2021-04-25 18:19:08
217KB
1
这是基于python爬虫技术编程写的开关单数据爬虫系统，实现全球海关、关单、外贸数据的爬取。框架采用python多线程技术+request+代理IP池,实现了每天几十亿家采购商供应商外贸和关单数据实时采集和更新。
2021-04-21 10:01:29
42.31MB
1
这个软件是通过scrapy爬虫框架结合代理IP池再加上request模拟请求技术以及验证码识别技术，可以做到日更新采集全国新工商信息。采集的数据自动存储在mysql数据库表里，可下载全量1.8亿多企业工商基本信息和36维度的详细信息.支持sql和excel导出数据包格式。
2021-04-20 19:08:52
42.31MB
1
这是基于python爬虫技术编程写的欧洲外贸数据爬虫系统，实现全球海关、关单、外贸数据的爬取。框架采用python多线程技术+request+代理IP池,实现了每天几十亿家采购商供应商外贸和关单数据实时采集和更新。
2021-04-20 19:08:41
42.31MB
1