一、项目介绍         今天我们的爬虫内容是bilibili视频弹幕爬取,并保存到本地为JSON格式,正常爬虫只需要发送请求,解析相应内容,而爬取bilibili的内容,视频弹幕并没在响应的html中,而是保存在一个响应的url中,以XML格式保存,所以这算是一个新的内容,我会在下面进行详解。 二、所需技术 import requests (发送请求获取响应数据) from lxml import etree (xpath提取内容) import re (正则表达式提取内容) import json (JSON格式与文本格式的转换) 三、网页分析 1、分析响应内容         首先以
2021-12-05 15:38:11 880KB bilibili html代码 li
1
相比较pandas,numpy并没有很直接的rolling方法,但是numpy 有一个技巧可以让NumPy在C代码内部执行这种循环。 这是通过添加一个与窗口大小相同的额外尺寸和适当的步幅来实现的。 import numpy as np data = np.arange(20) def rolling_window(a, window): shape = a.shape[:-1] + (a.shape[-1] - window + 1, window) strides = a.strides + (a.strides[-1],) return np.lib.stride_trick
2021-12-05 14:18:46 59KB IN li mp
1
机器学习过程中经常需要可视化,有助于加强对模型和参数的理解。 下面对梯度下降过程进行动图演示,可以修改不同的学习率,观看效果。 import numpy as np import matplotlib.pyplot as plt from IPython import display X = 2*np.random.rand(100,1) y = 4+3*X+np.random.randn(100,1) # randn正态分布 X_b = np.c_[np.ones((100,1)),X] # c_行数相等,左右拼接 eta = 0.1 # 学习率 n_iter = 1000 # 迭代次数
2021-12-05 13:49:25 96KB li lib mat
1
一款很酷的li列表美化实例! 值得下载看看!资源免费,大家分享!! 更多免费资源 http://ynsky.download.csdn.net/
2021-12-01 19:06:18 2KB js
1
LI-8100 土壤碳通量 土壤呼吸
2021-12-01 10:31:08 10.78MB LI-8100 土壤碳通量 土壤呼吸
1
The Linux Command Line 的中中文版,Linux学习文档,Linux系统,Linux命令行文档 清晰带完整目录
2021-11-30 22:37:49 20.29MB The Li Linux命
1
下次用python画图的时候选色选点都可以直接参考这边,牛逼!分享给大家,也给自己留个笔记。 参考网址: http://stackoverflow.com/questions/22408237/named-colors-in-matplotlib http://stackoverflow.com/questions/8409095/matplotlib-set-markers-for-individual-points-on-a-line 第二个参考网址给出了linestyle可选参数: '-' solid line style '--' dashed line style '-.'
2021-11-24 23:04:50 409KB li lib matplotlib
1
IPv6详解卷2:高级协议实现.Qing.Li等.扫描版-清晰帶目錄書籤,
2021-11-22 08:15:00 47.06MB IPV6 IPV4
1
项目下载地址 vue-cli多页面多路由项目示例 :vue+webpack+vue-router+vuex+mock+axios Usage This is a project template for vue-cli. github上找到某大神的一个基于vue-cli模板的vueAdmin后台管理的模板,根据项目需求改成一个多页面多路由的vue项目。 PC端:后台管理页面,单独的页面入口,单独的路由。 移动端:业务展示页面,单独的页面入口,单独的路由。 踩了无数的坑,终于是初见效果了,随后继续优化更新 Install # install dependencies npm ins
2021-11-21 22:48:10 214KB build c li
1
综合平时学习过程中收集的国内外几家著名公司制造执行系统MES的解决方案,还有对MES的介绍,希望对该行业的同事们有所帮助。
2021-11-20 15:12:32 10.75MB log li material
1