如果你是pytorch的用户，可能你会很熟悉pytorch生态圈中专门预处理图像数据集的torchvision库。从torchtext这个名字我们也能大概猜到该库是pytorch圈中用来预处理文本数据集...

一、了解FTP服务器 FTP（文件传输协议），运行在tcp洗衣上，使用两个端口，即数据端口和命令端口，也称之为控制端口。默认情况下，20是数据端口，21是控制端口。 FTP有两种传输模式：主...

概述可以获取的数据包括：video-视频模块user-用户模块dynamic-动态模块这次用“Running Man”十周年特辑的视频，来做个获取弹幕的Demo。我是对比没有对比，就没有伤害，就像最近的...

pyspark创建DataFrame
为了便于操作，使用pyspark时我们通常将数据转为DataFrame的形式来完成清洗和分析动作。RDD和DataFrame
在上一篇pyspark基本操作有提到RDD也是spark中...

1. 缘起在实际开发中遇到这样一个问题：以下是伪代码if embedding.model is not exist: calculate embedding ## moudel_1 save embedding.modelelse : embedding = load em...

一、socketserver实现并发
tcp协议的socket是只能和一个客户端通信的，使用socketserver可以实现和多个客户端通信，他是在socket的基础上进行的封装，底层还是调用的socket。sock...

Python 链接抖音python下载抖音内容的帖子网上有一些，但都比较麻烦，需要通过adb连接安卓手机后，模拟操作。我这么懒，这种事儿玩不来…那么，该如何获取抖音内容呢？网上搜了下大概有...

本文实例为大家分享了python实现某考试系统生成word试卷的具体代码，供大家参考，具体内容如下提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档准备条件1.试题exce...

end: 默认是换行，表示两个字符串最后以什么结尾。eg: 换行 end="\n"sep: 默认是空格，表示两个字符串之间用什么分割。eg: 空格 sep=" "补充：python 中的 print(x, end=) 和 pri...

keras 深度学习框架中get_value函数运行越来越慢，内存消耗越来越大问题问题描述如上图所示，经过时间和内存消耗跟踪测试，发现是keras.backend.get_value() 函数导致的程序越来...

一、Lambda表达式Lambda表达式又被称之为匿名函数
格式
lambda 参数列表：函数体def add(x,y): return x+y print(add(3,4))#上面的函数可以写成Lambda函数add_lambda=lambda...

大家好，我是才哥。最近周末也加班了，害…有刚接触python的粉丝同学在运行此前《》的完整代码遇到以下问题，然后…好吧，今天我们就专门介绍一下Python安装第三方库的一些小技巧，其...

一、train_on_batchmodel.train_on_batch(batchX, batchY)train_on_batch函数接受单批数据，执行反向传播，然后更新模型参数，该批数据的大小可以是任意的，即，它不需要提供明确的批...

一、数字类型1、整型int就是整数 ：100 ，200，2，3，4·······2、浮点型 float小数：1.22，1.32，1.00······3、内置函数——type type(已经被赋值的变量名或变量)count=100pri...

[:]和[::]的区别蛮大的，用的好可以节省时间，下面以实例进行分析array([:])>>> import numpy as np>>>>>> x=np.array([1,2,3,4,5,6,7,8,9,10,11,12])>>> print(x[1:5])#打印in...

NumPy包中的内置diag函数很有意思。假设创建一个1维数组a，和一个3*3数组b：import numpy as npa = np.arange(1, 4)b = np.arange(1, 10).reshape(3, 3)结果如下：>>> a
array([1...

一、心知天气API密钥获取首先，访问https://www.seniverse.com，进行登录或者注册操作，然后在控制台上创建一个免费版的项目，创建后，项目信息为：复制你的私钥信息，来到官方文档，发现AP...

Python中request请求得到的response,即通过request得到的数据：import requestsresponse = requests.get(https://www.jd.com/)response 的属性1、返回状态码response.status_...

1.response.text- 类型：str- 解码类型： 根据HTTP 头部对响应的编码作出有根据的推测，推测的文本编码- 如何修改编码方式：response.encoding=”gbk”2. response.content- 类型：by...

在使用tensorflow与keras混用是model.save 是正常的但是在load_model的时候报错了在这里mark 一下其中错误为：TypeError: tuple indices must be integers, not list再一一番...

前言
我们都知道时区，标准时区是UTC时区，django默认使用的就是UTC时区，所以我们存储在数据库中的时间是UTC的时间，但是当我们做的网站只面向国内用户，或者只是提供内部平台使用，我...

一、创建一个进程要创建一个进程，最简单的方式是用一个目标函数实例化一个Process对象，然后与threading一样调用start()函数让它工作。示例如下：import multiprocessingdef wor...

前言numpy支持对矩阵和数组进行运算，因此很多numpy的很多运算都需要指定操作的维数参数axis（当然这些axis都有带默认值的），本博客以numpy.sum求和函数为例，具体分析axis参数不同...

pandas.Series.cumprod 官方文档cumprod()累积连乘Series.cumprod(axis=None, skipna=True, *args, **kwargs)#实现功能：Return cumulative product over a DataFrame or Ser...

前言作为一个数据分析师，应该信奉一句话——“一图胜千言”。不过这里要说的并不是数据可视化，而是一款全民向的产品形态——表情包！！！！表情包不仅仅是一种符号，更是一种文化——是...

开启Web服务1.基本方式Python中自带了简单的服务器程序，能较容易地打开服务。在python3中将原来的SimpleHTTPServer命令改为了http.server，使用方法如下：1. cd www目录2. pytho...

一、下载instant client1.附链接：http://www.oracle.com/technetwork/topics/winx64soft-089540.html提示：需要有oracle的账号才能下载嗷！2.解压到某一位置并配置环境变量二、c...

【原理介绍】通过NETCONF，网管能够用可视化的界面统一管理网络中的设备，并且安全性高、可靠性强、扩展性强。如下图所示，网管与网络中的所有交换机之间建立NETCONF会话，用户即可...

大家好，我是启航。本文将给大家分享一个实用的Python办公自动化脚本 「利用Python批量翻译英文Word文档并保留格式」，最终效果甚至比部分收费的软件还要好！先来看看具体的工作...

实现步骤： 图像灰度化 边缘检测 根据Canny检测得出来的Mat寻找轮廓 算出最大轮廓周长or面积 根据获取到的最大轮廓下标进行轮廓绘制 画出最大矩形，并返回Re...

一、初始化CounterCounter支持3种形式的初始化，比如提供一个数组，一个字典，或单独键值对“=”式赋值。具体初始化的代码如下所示：import collectionsa = collections.Counter(['...

一、算法概述 AdaBoost 是英文 Adaptive Boosting（自适应增强）的缩写，由 Yoav Freund 和Robert Schapire 在1995年提出。 AdaBoost 的自适应在于前一个基本分类器分类错...

假如我们要构建新特征b目的是从a中筛选出数值在4~6之间的数据，如果符合就是True，否则就是False。那么代码如下import pandas as pdlists=pd.DataFrame({'a':[1,2,3,4,5,6,7,8,...

本文中记录的是如何使用pandas来实现hive中爆炸函数的功能具体需求统计每个员工的销售记录： 有作为销售员、跟单员、结单员的任意一种，即可说明参与了该订单的销售记录；...

原理介绍keras是一种基于模块的高级深度学习开发框架，它并没有仅依赖于某一种高速底层张量库，而是对各种底层张量库进行高层模块封装，让底层库完成诸如张量积、卷积操作。目前，K...

问题：python+Flask 反复调用model报错ValueError: Tensor Tensor("dense_2/Softmax:0"...) is not an element of this graph.原因：不明解决方案：在初始化加载模型之后，就随便生...

ndarray 的数据类型数据类型，即 dtype ，也是一个特殊的对象， 它包含了ndarray需要为某一种类型数据所申明的内存块信息（也成为了元数据，即表示数据的数据）dtype是NumPy能够与琪他...

一、前言Python assert（断言）用于判断一个表达式，在表达式条件为 false 的时候触发异常。二、异常即便 Python 程序的语法是正确的，在运行它的时候，也有可能发生错误。运行期检测...

前言如题目所述，又是花费了两天的时间实现了该功能，本来今天下午有些心灰意冷，打算放弃嵌入到Scoll Area中的想法，但最后还是心里一紧，仔细梳理了一下逻辑，最终实现了功能效果展示...

一、简介 本功能目的在于提取收据/发票上的信息，用机器代替人的方式，提高工作效率 实现方式是通过cv2模块截取需要的信息，调用百度的api文字识别接口二、代码实现1.导入...

爬虫有多重要对搜索引擎来说，爬虫不可或缺；对舆情公司来说，爬虫是基础；对 NLP来说，爬虫可以获取语料；对初创公司来说，爬虫可以获取初始内容。但是爬虫技术纷繁复杂，不同类型的抓取场...

看代码吧~# example.md1 2 34 5 67 8 9 >>> with open('example.md') as f: lines = f.readlines()>>> lines['1 2 3\n', '4 5 6\n', '7 8 9\n']# 我们发现每一行后...

np.argpartition 难以解决topKtopK是常用的一个功能，在python中，numpy等计算库使用了丰富的底层优化，对于矩阵计算的效率远高于python的for-loop实现。因此，我们希望尽量用一些n...

一、解析网站1.1 获取音频地址在喜马拉雅网站上，随便点开一个音频，打开“开发者工具”，再点击播放按钮，可以看到出现了多个请求：经过排查，发现可疑url:查看它的响应信息，发现音频地...

前言每次从官网提供的下载方式，使用conda安装pytorch的时候都会因为网速问题导致失败。使用conda清华源安装也不失为一种解决方案，然而这种方式在指定cuda版本时非常不方便。...

前言Matplotlib的可以把很多张图画到一个显示界面，在作对比分析的时候非常有用。
对应的有plt的subplot和figure的add_subplo的方法，参数可以是一个三位数字（例如111），也可以是一...

概述Visdom:一个灵活的可视化工具，可用来对于 实时，富数据的 创建，组织和共享。支持Torch和Numpy还有pytorch。visdom
可以实现远程数据的可视化，对科学实验有很大帮助。我们可...

一、需求：判断当前浏览器是否为微信，是的话挑起微信支付，不是的话，显示二维码图片并提示用户到微信中打开二、效果图：三、代码实现：1. 判断是否微信# toolbox.pyfrom typing impor...

大纲Python文件类型及汇总一、元组1 特征1.任意对象的有序集合
2.通过下标访问
3.不可变
4.长度固定，任意类型，任意嵌套>>> t = (1,2,3,4,5)>>> t[0] = 2Traceback (most rece...

一、主界面实现
（一）实现最简单的窗体from tkinter import *if __name__ == '__main__': tk = Tk() tk.geometry('500x400+500+150') tk.title('有趣的透明窗体-开篇...