71浏览

0评论

python 用递归实现通用爬虫解析器

目录需求分析
进一步分析
再进一步分析
代码实现
我们在写爬虫的过程中，除了研究反爬之外，几乎全部的时间都在写解析逻辑。那么，生命苦短，为什么我们不写一个通用解析器呢？对啊！为...

• 2021-09-30

58浏览

0评论

吴恩达机器学习练习:神经网络(反向传播)

1 Neural Networks 神经网络1.1 Visualizing the data 可视化数据这部分我们随机选取100个样本并可视化。训练集共有5000个训练样本，每个样本是20*20像素的数字的灰度图像。...

• 2021-09-30

79浏览

0评论

Python实现求解斐波那契第n项的解法(包括矩阵乘法＋快速幂)

斐波那契数列首先我们来定义一下斐波那契数列：即数列的第0项：算法一：递归递归计算的节点个数是O(2ⁿ)的级别的，效率很低，存在大量的重复计算。比如：f(10) = f(9) + f(8)f(9)...

• 2021-09-30

96浏览

0评论

AI:如何训练机器学习的模型

目录1.Training: 如何训练模型2. Loss Function:损失和损失函数3. Gradient Descent:梯度下降法4. Learning Rate:学习速率5. 扩展：BP神经网络训练过程1.Training: 如何训练...

• 2021-09-30

71浏览

0评论

python3 解决requests出错重试的问题

对python3下的requests使用并不是很熟练，今天稍微用了下，请求几次下来后发现出现连接超时的异常，上网查了下，找到了一个还算中肯的解决方法。retrying是python的一个自带的重试...

• 2021-09-30

73浏览

0评论

基于python分布式爬虫并解决假死的问题

python版本：3.5.4系统：win10 x64通过网页下载视频方法一：使用urllib.retrieve函数放函数只需要两个参数即可下载相应内容到本地，一个是网址，一个是保存位置import urllib.request...

• 2021-09-30

82浏览

0评论

python 机器学习的标准化、归一化、正则化、离散化和白化

目录1 标准化
2 归一化
3 正则化
4 离散化
5 白化
机器学习的本质是从数据集中发现数据内在的特征，而数据的内在特征往往被样本的规格、分布范围等外在特征所掩盖。数...

• 2021-09-30

56浏览

0评论

python 在服务器上调用数据库特别慢的解决过程

在排除网络和环境配置问题后，如果发现本地调试比较快，而部署到服务器就会出现卡顿现象，可以检查下在上传服务器时，是否将连接mysql 的IP改为：localhoast、或者unix_socket 方式连...

• 2021-09-30

68浏览

0评论

python里读写excel等数据文件的6种常用方式(小结)

目录1. python内置方法（read、readline、readlines）2. 内置模块（csv）
3. 使用numpy库（loadtxt、load、fromfile）4. 使用pandas库（read_csv、read_excel等）
5、读写excel文件（xlrd、xl...

• 2021-09-30

68浏览

0评论

Python查询oracle数据库速度慢的解决方案

如下所示：conn = cx_Oracle.connect('username/password@ip:port/servername')cur = conn.cursor()cur.execute('SELECT * FROM "db"."table"')cur是一个迭代器,不要用fetcha...

• 2021-09-30

66浏览

0评论

pycharm调试时显示图片问题的解决

查了攻略，还问了师兄，终于解决了我的问题==想了想，没准有人会跟我犯同样的错误（好吧，，可能没几个）写篇趟坑日志。点击show python promt输入如下（类似）命令import matplotlib.pyplot...

• 2021-09-30

105浏览

0评论

用基于python的appium爬取b站直播消费记录

基于python的Appium进行b站直播消费记录爬取之前看文章说fiddler也可以进行爬取，但尝试了一下没成功，这次选择appium进行爬取。类似的，可以运用爬取微信朋友圈和抖音等手机app...

• 2021-09-30

254浏览

0评论

python+pywinauto+lackey实现PC端exe自动化的示例代码

欢迎阅读最近一年多一直在从事PC端exe的测试，也是趁着闲余时间，调研了下exe的自动化。
核心框架为python+pywinauto+lackey这样的一个组合方式
本文以大家熟知的Tim为例子，实现...

• 2021-09-30

236浏览

0评论

python爬虫之教你如何爬取地理数据

目录一、shapely模块1、shapely2、point→Point类3、导入所需模块4、Point（1）、创建point,主要有以下三种方法（2）、point常用属性（3）、point常用方法，计算距离5、LineString6、Line...

• 2021-09-30

236浏览

0评论

如何建立一个超图详解

1.图和超图图作为一种数据结构，由节点和边组成，可由下图表示。其中一个边只能链接两个节点。一个图可表示为G=（v，e，w）其中v表示节点，e表示边，w表示节点的特征。关于图的表示可参考，本...

• 2021-09-30

273浏览

0评论

python爬取各省降水量及可视化详解

在具体数据的选取上，我爬取的是各省份降水量实时数据话不多说，开始实操正文 1.爬取数据 使用python爬虫，爬取中国天气网各省份24时整点气象数据 由于降水量为动态数据，以j...

• 2021-09-30

238浏览

0评论

Python 如何将字符串每两个用空格隔开

我就废话不多说了，大家还是直接看代码吧~example>>> import re>>> subject = '080045000106309140003F2F7D100A0A3C0A0A0A3D0A00000800450000EE000000003F06CCF0C0A8C864C0A8...

• 2021-09-30

122浏览

0评论

Python基础之画图神器matplotlib

目录Python画图（线条颜色、大小、线形）线条颜色设置以及网格大小标签设置效果设置线条的大小和样式线段类型：完整代码：Python画图（线条颜色、大小、线形）先放基础代码，下面讲述效果...

• 2021-09-30

342浏览

0评论

解决pycharm19.3.3安装pyqt5找不到designer.exe和pyuic.exe的问题

安装pyqt5和pyqt5-tools利用pyqt5编写GUI界面，首先需要下载pyqt5以及相应的pyqt5-tools，我的python版本是python38。方法一：在pycharm中安装
打开pycharm，选中自己的项目，点击左...

• 2021-09-30

359浏览

0评论

Python 作图实现坐标轴截断(打断)的效果

主题：利用python画图实现坐标轴截断或打断关键词：python, plot, matplotlib, break axes方法一：首先介绍一种简单快速的方法——调用包 brokenaxes。详细请点击参考import matp...

• 2021-09-30

189浏览

0评论

Python 聊聊socket中的listen()参数(数字)到底代表什么

疑问在调用socket的时候，我们会使用到listen()函数，里面有个参数叫backlog, 例如：socket.listen(5). 那么这个数字5到底代表什么意思呢？网上有很多种说法，讲的都是概念，很多都是复...

• 2021-09-30

110浏览

0评论

详解pytest实现mark标记功能详细介绍

mark标记​在实际工作中，我们要写的自动化用例会比较多，也不会都放在一个py文件中，如果有几十个py文件，上百个方法，而我们只想运行当中部分的用例时怎么办？​pytest提供...

• 2021-09-30

121浏览

0评论

Pytest 使用简介

前言　　最近在听极客时间的课程，里面的讲师极力推崇 pytest 框架，鄙视 unittest 框架，哈哈！然后查了些资料，发现了一条 python 鄙视链：pytest 鄙视 > unittest 鄙视 >robotframew...

• 2021-09-30

166浏览

0评论

python 读取以空格分开的文件操作

在查找数据集的时候发现，并不是所有的数据集都是以csv的格式存储，也就是每一列特征数据的分割并不是都以逗号分割，有的数据格式是以空格为分割例如.data格式，接下来就实现对.dat...

• 2021-09-30

295浏览

0评论

pytest实现测试用例参数化

背景
本文总结pytest的测试用例参数化。说明
软件测试中，输入相应值，检查期望值，是常见测试方法。
在自动化测试中，一个测试用例对应一个测试点，通常一组测试数据无法完全覆盖测...

• 2021-09-30

117浏览

0评论

python使用pytest接口自动化测试的使用

简单的设计思路
利用pytest对一个接口进行各种场景测试并且断言验证 配置文件独立开来（conf文件），实现不同环境下只需要改环境配置即可 测试的场景读取excle的测试用...

• 2021-09-30

163浏览

0评论

用Python的绘图库(matplotlib)绘制小波能量谱

时间小波能量谱 反映信号的小波能量沿时间轴的分布。由于小波变换具有等距效应，所以有：式中表示信号强度，对于式①在平移因子b方向上进行加权积分式中代表时间-小能量谱尺度...

• 2021-09-30

116浏览

0评论

人脸识别具体案例(李智恩)

项目环境：python3.6一、项目结构二、数据集准备数据集准备分为两步： 获取图片. 提取人脸.1、获取图片首先可以利用爬虫，从百度图片上批量下载图片，但注意下载数据集所用的...

• 2021-09-30

184浏览

0评论

基础语音识别-食物语音识别baseline(CNN)

目录1 下载和解压数据集2 加载库函数3 特征提取以及数据集的建立建立类别标签字典提取梅尔频谱特征获取特征和标签独热编码把数据集划分为训练集和测试集4 建立模型搭建CNN...

• 2021-09-30

100浏览

0评论

Python 通过分隔符分割文件后按特定次序重新组合的操作

看代码吧~#-*-encoding:utf-8-*-import os, sys, time, datetime, globfo1 = open("C:/Users/Administrator/Desktop/areainfo.txt", "w")fo2 = open("C:/Users/Administrat...

• 2021-09-30

177浏览

0评论

python+requests+pytest接口自动化的实现示例

目录1、发送get请求2、发送post请求3、发送https请求4、文件上传5、文件下载6、timeout超时7、鉴权
7.1、auth参数鉴权7.2、session操作7.3、token操作7.4、sign签名8、自动...

• 2021-09-30

135浏览

0评论

face_recognition库在python的安装

当py文件中引用了库face_recognition但是python中没有安装这个库的时候，就会出现No module named 'face_recognition'的错误。此时诶过直接pip install face_recognition会报...

• 2021-09-30

212浏览

0评论

完美解决matplotlib子图坐标轴重叠问题

绘制matplotlib多个图形于一张图时往往会出现相邻图坐标轴重叠的现象此时只须在汇完所有子图后加上以下代码即可plt.tight_layout()补充：解决matplotlib横坐标日期过长导致的...

• 2021-09-30

123浏览

0评论

python常见模块与用法

目录一、常见内置模块1.1什么叫做模块?1.2模块的分类1.3第三方的模块(需要安装)二、模块导入的问题三、random模块3.1randint() --------- 产生随机整数[m,n]3.2random(...

• 2021-09-30

117浏览

0评论

Selenium爬取b站主播头像并以昵称命名保存到本地

申明：资料来源于网络及书本，通过理解、实践、整理成学习笔记。Pythion的Selenium自动化测试之获取哔哩哔哩主播的头像以昵称命名保存到本地文件效果图方法1通过接口获取首先使...

• 2021-09-30

133浏览

0评论

用python制作词云视频详解

使用到的第三方库Package Version--------------- ---------baidu-aip 2.2.18.0jieba 0.42.1moviepy 1.0.3numpy 1.20.2opencv-...

• 2021-09-30

127浏览

0评论

Django模板中变量的运算实现

在django中的模板下我们知道变量使用{{xxx}}来呈现，可是当出现两个变量进行运算怎么处理那？#加法：{{value|add:value2}}#返回的结果是value+value2的值，假设你value为40，value2为...

• 2021-09-30

112浏览

0评论

python基础之文件操作和异常处理

目录一、文件和异常1.1从文件中读取数据1.2open（）1.3关键字with1.4read（）二、逐行读取三、创建一个包含文件各行内容的列表3.1readlines（）四、查找字符串中是否含有特定的字符串4....

• 2021-09-30

140浏览

0评论

python爬虫框架feapder的使用简介

目录1. 前言
2. 介绍及安装
3. 实战一下
3-1 创建爬虫项目3-2 创建爬虫 AirSpider3-3 配置数据库、创建数据表、创建映射 Item3-4 编写爬虫及数据解析3-5 数据入库4....

• 2021-09-30

99浏览

0评论

opencv模板匹配相同位置去除重复的框

使用opencv自带的模板匹配1、目标匹配函数：cv2.matchTemplate()
res=cv2.matchTemplate(image, templ, method, result=None, mask=None)
image：待搜索图像
templ：模板图像
res...

• 2021-09-30

147浏览

0评论

Datawhale练习之二手车价格预测

目录1. 总览数据概况1.1 判断数据缺失和异常1.1.1 查看nan1.1.2 *异常值检测（重要！易忽略）1.2 了解预测值的分布1.2.1 数字特征分析1.2.2 类别特征分析（会画，不会利用结果）2. *用p...

• 2021-09-30

109浏览

0评论

Python双版本计算器详解

有框计算器这个计算器我们用到了Python自带的Tkinter库# 导入tkinter库import tkinter我们要对窗口进行一些基本操作# 获取一个窗口window = tkinter.Tk()# 设置标题window....

• 2021-09-30

181浏览

0评论

python爬取晋江文学城小说评论(情绪分析)

1. 收集数据1.1 爬取晋江文学城收藏排行榜前50页的小说信息获取收藏榜前50页的小说列表，第一页网址为 ‘http://www.jjwxc.net/bookbase.php?fw0=0&fbsj=0&ycx0=0&xx2=2&...

• 2021-09-30

215浏览

0评论

python基础之装饰器详解

目录一、前言二、高阶函数三、函数嵌套四、装饰器4.1 被装饰方法带返回值4.2 被装饰方法带参数4.3 验证功能装饰器4.4 验证功能装饰器——带参数一、前言装饰器：本质就是函数...

• 2021-09-30

108浏览

0评论

python爬虫之你好,李焕英电影票房数据分析

目录一、前言二、影评爬取并词云分析2.1 网站选取2.2 爬取思路2.2.1 获取网页请求2.2.2解析获取的网页2.2.3提取影评数据2.2.4保存文件2.2.5 词云分析2.3 代码总观2.3.1 爬...

• 2021-09-30

101浏览

0评论

python分数实例用法

1、说明分数实现了一个合理的对象。清楚地保留了一个分子和一个分母，从而避免了浮点数学的一些不准确性和局限性。一旦创建分数，它可以像往常一样用于数学表达式。2、实例>>>...

• 2021-09-30

94浏览

0评论

Python装饰器的应用场景及实例用法

1、说明装饰本质上是一个Python函数，它能使其他函数在没有任何代码变化的情况下增加额外的功能。有了装饰，我们可以抽出大量与函数功能无关的相同代码，继续重用。2、应用场景包...

• 2021-09-30

208浏览

0评论

python基础之停用词过滤详解

目录一、什么是停用词二、加载停用词字典三、删除停用词四、分词以及删除停用词五、直接删除停用词（不分词）一、什么是停用词在汉语中，有一类没有多少意义的词语，比如组词“的”...

• 2021-09-30

110浏览

0评论

利用pygame完成动画精灵和碰撞检测

动画精灵和碰撞检测一、动画精灵动画精灵：四处移动的单个图像或图像部分称为动画精灵（sprite），pygame有一个特殊的模块帮助跟踪屏幕上移动的大量图像。利用这个模块，可以更容易地...

• 2021-09-30

144浏览

0评论

python机器学习之线性回归详解

目录一、python机器学习–线性回归二、OLS线性回归2.1 Ordinary Least Squares 最小二乘法2.2 OLS线性回归的代码实现三、梯度下降算法3.1 GDLinearRegression代码实现四、...

• 2021-09-30