HP-Fanfiction-Analysis:从 fanfiction.net 抓取关于哈利波特同人小说的数据,并分析它创建图表-源码

上传者: 42128537 | 上传时间: 2021-07-02 15:04:01 | 文件大小: 8KB | 文件类型: ZIP
运行 create_spider.sh 来制作蜘蛛。 使 spider1.py 中的变量 max_depth 等于您要抓取的页面数。 然后,要运行蜘蛛,请进入创建的目录 create_spider.sh 并在终端中输入 scrapy crawl fanficnet -o items.csv -t csv。 将生成的 csv 文件放在与analyzecsv.py 相同的目录中,并运行analyzecsv.py 强烈考虑使用我已经下载的数据而不是重新运行spider,以便为fanfiction.net 节省额外的流量。 您可以在此处下载该数据。 依赖项:Scrapy、matplotlib、scipy、dateutil 和 numpy 我认为我导入的其余内容是本机库。 这是我导入的所有其他内容的列表:unicodedata、re、time、csv、re、operator、math

文件下载

资源详情

[{"title":"( 5 个子文件 8KB ) HP-Fanfiction-Analysis:从 fanfiction.net 抓取关于哈利波特同人小说的数据,并分析它创建图表-源码","children":[{"title":"HP-Fanfiction-Analysis-master","children":[{"title":"analyzecsv.py <span style='color:#111;'> 19.66KB </span>","children":null,"spread":false},{"title":"spider1.py <span style='color:#111;'> 5.19KB </span>","children":null,"spread":false},{"title":"README.md <span style='color:#111;'> 837B </span>","children":null,"spread":false},{"title":"items.py <span style='color:#111;'> 633B </span>","children":null,"spread":false},{"title":"create_spider.sh <span style='color:#111;'> 126B </span>","children":null,"spread":false}],"spread":true}],"spread":true}]

评论信息

免责申明

【只为小站】的资源来自网友分享,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论 【只为小站】 经营者是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二条之规定,若资源存在侵权或相关问题请联系本站客服人员,zhiweidada#qq.com,请把#换成@,本站将给予最大的支持与配合,做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明