466浏览

0评论

python爬虫爬取淘宝商品比价(附淘宝反爬虫机制解决小办法)

因为评论有很多人说爬取不到，我强调几点kv的格式应该是这样的：
kv = {‘cookie':‘你复制的一长串cookie',‘user-agent':‘Mozilla/5.0'}注意都应该用 ‘' ，然后还有个英文的...

• 2021-01-13

128浏览

0评论

Python爬虫逆向分析某云音乐加密参数的实例分析

本文转自：https://blog.csdn.net/qq_42730750/article/details/108415551前言  各大音乐平台是从何时开始收费的这个问题没有追溯过，印象中酷狗在16年就已经开始...

• 2021-01-13

171浏览

0评论

pycharm + django跨域无提示的解决方法

如何解决pycharm配置跨域不提示？正常我们需在在如上中间件内配置跨域，但是2019之前的版本配置中间件可能需要全部自己敲出来，不会有提示，那我们不妨换个位置试试在TEMPLATES模板...

• 2021-01-13

141浏览

0评论

python集合的新增元素方法整理

我们可以把全体人数当作一个集合，想要往其中加入新人有不同的增加方式。可以一周增加一次，也可以集中到月底一起加入集体。我们今天所要讲的在python集合中，添加元素的两种方法...

• 2021-01-13

276浏览

0评论

python可视化 matplotlib画图使用colorbar工具自定义颜色

python matplotlib画图使用colorbar工具自定义颜色 colorbar（draw colorbar without any mapple/plot）自定义colorbar可以画出任何自己想要的colorbar，自由自在、不受约束，不依...

• 2021-01-13

344浏览

0评论

解决python 执行shell命令无法获取返回值的问题

问题背景：利用python获取服务器中supervisor状态信息时发现未能获取到返回值。python获取执行shell命令后返回值得几种方式：# 1.os模块ret = os.popen("supervisorctl status"...

• 2021-01-13

196浏览

0评论

python使用dlib进行人脸检测和关键点的示例

#!/usr/bin/env python# -*- coding:utf-8-*-# file: {NAME}.py# @author: jory.d# @contact: dangxusheng163@163.com# @time: 2020/04/10 19:42# @desc: 使用dlib进行人脸...

• 2021-01-13

194浏览

0评论

解决Pymongo insert时会自动添加_id的问题

在使用pymongo时遇到了一个小坑：在Flask框架中，将字典插入mongodb后再返回就报错@app.route('xxxx')def main(): ... data = { 'a':'a', 'b':'b' } mycol.insert_one(data) re...

• 2021-01-13

129浏览

0评论

Python 利用flask搭建一个共享服务器的步骤

零、概述我利用flask搭建了一个简易的共享服务器，分享给大家一、python代码import osimport timefrom flask import Flask,render_template,url_for,redirect,send_from_dire...

• 2021-01-13

143浏览

0评论

python中复数的共轭复数知识点总结

理科学生应该都了解过共轭吧，经常在数学或者物理还有化学中出现，在坐标轴上去描述共轭函数还是比较清晰的，py语言里也经常会出现关于共轭函数的使用，操作也非常有趣， 在计算机课...

• 2021-01-13

130浏览

0评论

Django中使用Celery的方法步骤

(一)、概述
Celery是一个简单、灵活和可靠的基于多任务的分布式系统，为运营提供用于维护此系统的工具。专注于实时处理的任务队列，同时也支持任务的调度。执行单元为任务(task...

• 2021-01-13

202浏览

0评论

python中round函数保留两位小数的方法

在我们日常计算的过程中，如果计算出小数，对大量的被保留数据，采用四舍五入这种保留法的误差总和是最小的，能使被保留部分的与实际值差值不超过最后一位数量级的二分之一。四舍五...

• 2021-01-13

154浏览

0评论

Python实现PS滤镜中的USM锐化效果

本文用 Python 实现 PS 滤镜中的 USM 锐化效果import matplotlib.pyplot as pltfrom skimage import iofrom skimage.filters import gaussianfile_name='D:/Visual Effects...

• 2021-01-13

233浏览

0评论

python 写一个文件分发小程序

一、概述该小程序实现从源端到目标端的文件一键拷贝，源端和目标段都在一台电脑上面，只是目录不同而已二、参数文件说明1. settings.txt的说明
a. 通过配置settings.txt，填源端...

• 2021-01-13

165浏览

0评论

pymongo insert_many 批量插入的实例

我就废话不多说了，大家还是直接看代码吧~lt=client.fangjia.district_stat_all_0416dl = dt.find(query)bf=[]for m in dl: bf.append(m) if len(bf)==20000: lt.insert...

• 2021-01-13

139浏览

0评论

scrapy头部修改的方法详解

被Scrapy自动添加的头部在没有任何配置的情况下，scrapy会对请求默认加上一些头部信息Scrapy会通过配置文件中的USER_AGENT配置，自动为头部添加User-Agent，这条配置会被任何包含...

• 2021-01-13

54浏览

0评论

python基于socket模拟实现ssh远程执行命令

一、subprocess.Popen()subprocess模块定义了一个类： Popen类原型：class subprocess.Popen( args, bufsize = 0, executable = None, stdin = None, stdout = None,...

• 2021-01-13

287浏览

0评论

python从ftp获取文件并下载到本地

最近有需求是，需要把对方提供的ftp地址上的图片获取到本地服务器，原先计划想着是用shell 操作，因为shell 本身也支持ftp的命令 在通过for 循环也能达到需求。但是后来想着 还是...

• 2021-01-13

150浏览

0评论

python mongo 向数据中的数组类型新增数据操作

我就废话不多说了，大家还是直接看图吧~补充知识：pymongo插入数据时更新和不更新的使用（1）update的setOnInsert当该key不存在的时候执行插入操作，当存在的时候则不管，可以使用setOn...

• 2021-01-13

79浏览

0评论

快速解决pymongo操作mongodb的时区问题

如下所示：1、mongodb的日期时间格式是UTC时间，中国时间 = UTC时间 +82、可在pymongo客户端加入时区以解决此问题：import pytzfrom pymongo import MongoClientfrom datetime im...

• 2021-01-13

145浏览

0评论

python help函数实例用法

有些人说py中有两个函数可以实现对所有函数的了解以及使用，其中之一，就是我们今天要讲解的help函数。有些小伙伴可能比较陌生，但是另一个函数是dir函数，这样是不是就能搞懂了。...

• 2021-01-13

123浏览

0评论

用ldap作为django后端用户登录验证的实现

每个公司在运维平台化过程中，如果以开始没有规划，免不了全面开花，会做成好多个平台，然后每个平台都有自己的认证体系，等平台多了，记录这些账号就变得非常烦人，如果用不同的密码，对人...

• 2021-01-13

234浏览

0评论

python中pow函数用法及功能说明

幂运算是高更数学的应用学科，是一种关于幂的数学运算。同底数幂相乘，底数不变，指数相加。同底数幂相除，底数不变，指数相减。幂的乘方，底数不变，指数相乘。适用于精确计算领域。计算...

• 2021-01-13

125浏览

0评论

python 模拟登陆github的示例

# -*- coding: utf-8 -*-# @Author: CriseLYJ# @Date: 2020-08-14 12:13:11import reimport requestsclass GithubLogin(object): def __init__(self, email, password):...

• 2021-01-13

138浏览

0评论

用python对oracle进行简单性能测试

一、概述dba在工作中避不开的两个问题，sql使用绑定变量到底会有多少的性能提升？数据库的审计功能如果打开对数据库的性能会产生多大的影响？最近恰好都碰到了，索性做个实验。 sq...

• 2021-01-13

141浏览

0评论

python3 通过 pybind11 使用Eigen加速代码的步骤详解

python是很容易上手的编程语言，但是有些时候使用python编写的程序并不能保证其运行速度（例如：while 和 for），这个时候我们就需要借助c++等为我们的代码提速。下面是我使用pybind1...

• 2021-01-13

155浏览

0评论

Python常用GUI框架原理解析汇总

Graphical User Interface，简称 GUI，又称图形化用户接口，所谓的GUI编程，指的是用户不需要输入代码指令，只通过图形界面的交互就可以操作软件功能。Tkinter一个轻量级的跨平台图形...

• 2021-01-13

121浏览

0评论

详解BeautifulSoup获取特定标签下内容的方法

以下是个人在学习beautifulSoup过程中的一些总结，目前我在使用爬虫数据时使用的方法的是：先用find_all()找出需要内容所在的标签，如果所需内容一个find_all()不能满足，那就用两...

• 2021-01-13

267浏览

0评论

Python Selenium XPath根据文本内容查找元素的方法

问题现象
元素的属性中没有id、name；虽然有class，但比较大众化，且位置也不固定；例如：页码中的下一页；那该如何找到该元素？<a class="paging">上一页</div><a class="paging">1</div...

• 2021-01-13

186浏览

0评论

python 爬取小说并下载的示例

代码import requestsimport timefrom tqdm import tqdmfrom bs4 import BeautifulSoup""" Author: Jack Cui Wechat: https://mp.weixin.qq.com/s/OCWwRVDFNslIuKyi...

• 2021-01-13

103浏览

0评论

Python hashlib和hmac模块使用方法解析

python之hashlib模块：主要提供字符加密功能，python3中将md5和sha模块整合到了hashlib模块，支持md5,sha1, sha224, sha256, sha384, sha512等算法#!/usr/bin/env python3# -*- c...

• 2021-01-13

194浏览

0评论

BeautifulSoup中find和find_all的使用详解

爬虫利器BeautifulSoup中find和find_all的使用方法二话不说，先上段HTML例子<html> <head> <title> index </title> </head> <body> <div> <ul>...

• 2021-01-13

216浏览

0评论

Selenium+BeautifulSoup+json获取Script标签内的json数据

Selenium爬虫遇到 数据是以 JSON 字符串的形式包裹在 Script 标签中，
假设Script标签下代码如下：<script id="DATA_INFO" type="application/json" >{ "user": { "isLogin...

• 2021-01-13

160浏览

0评论

pyqt5实现井字棋的示例代码

本文介绍的是利用pyqt5实现井字棋，下面话不多说了，来一起看看详细的介绍作者：袁少泽代码如下（示例）：import randomimport sysimport timefrom PyQt5.QtCore import *from PyQt5.Qt...

• 2021-01-13

970浏览

0评论

selenium判断元素是否存在的两种方法小结

在selenium中没有对应的方法,需要自己去写。 元素存在，但不唯一，操作元素会报错 元素不存在，操作元素也会报错第一种：捕获异常
弊端：只要页面上有元素，不几个，都返回Truefrom sel...

• 2021-01-13

66浏览

0评论

使用Python爬取Json数据的示例代码

一年一度的双十一即将来临，临时接到了一个任务：统计某品牌数据银行中自己品牌分别在2017和2018的10月20日至10月31日之间不同时间段的AIPL（“认知”(Aware)、“兴趣”(Interest...

• 2021-01-13

159浏览

0评论

Selenium执行完毕未关闭chromedriver/geckodriver进程的解决办法(java版+python版)

selenium操作chrome浏览器需要有ChromeDriver驱动来协助。webdriver中关浏览器关闭有两个方法，一个叫quit，一个叫close。
/** * Close the current window, quitting the bro...

• 2021-01-13

94浏览

0评论

解决pycharm导入numpy包的和使用时报错：RuntimeError: The current Numpy installation (‘D:\\python3.6\\lib\\site-packa的问题

标题用pycharm导入numpy包的和使用时报错：RuntimeError: The current Numpy installation ('D:\python3.6\lib\site-packages\numpy\init.py1.file→settings→project inter...

• 2021-01-13

102浏览

0评论

python爬虫beautifulsoup解析html方法

用BeautifulSoup 解析html和xml字符串
实例：#!/usr/bin/python# -*- coding: UTF-8 -*-from bs4 import BeautifulSoupimport re#待分析字符串html_doc = """<html><head> <...

• 2021-01-13

202浏览

0评论

python 通过 pybind11 使用Eigen加速代码的步骤

python是很容易上手的编程语言，但是有些时候使用python编写的程序并不能保证其运行速度（例如：while 和 for），这个时候我们就需要借助c++等为我们的代码提速。下面是我使用pybind1...

• 2021-01-13

158浏览

0评论

用Python实现童年贪吃蛇小游戏功能的实例代码

贪吃蛇作为一款经典小游戏，早在 1976 年就面世了，我最早接触它还是在家长的诺基亚手机中。尽管贪吃蛇的历史相对比较久远，但它却有着十分顽强的生命力，保持经久不衰，其中很重要的...

• 2021-01-13

129浏览

0评论

使用BeautifulSoup4解析XML的方法小结

Beautiful Soup 是一个用来从HTML或XML文件中提取数据的Python库，它利用大家所喜欢的解析器提供了许多惯用方法用来对文档树进行导航、查找和修改。帮助文档英文版：https://ww...

• 2021-01-13

290浏览

0评论

Selenium关闭INFO:CONSOLE提示的解决

参考：https://stackoverflow.com/questions/33983860/hide-chromedriver-console-in-python&#63;rq=11. 问题起因： Selenium设置了headless，导致cmd控制台不断输出CONSOLE信息c...

• 2021-01-13

383浏览

0评论

pycharm实现猜数游戏

本文实例为大家分享了pycharm实现猜数游戏的具体代码，供大家参考，具体内容如下1. 设计界面如下所示，利用QTdesigner设计的界面：然后将设计好的界面转换为.py文件：guess_number.py...

• 2021-01-13

153浏览

0评论

python 实现数据库中数据添加、查询与更新的示例代码

一、前言　　最近做web网站的测试，遇到很多需要批量造数据的功能；比如某个页面展示数据条数需要达到10000条进行测试，此时手动构造数据肯定是不可能的，此时只能通过python脚本进...

• 2021-01-13

180浏览

0评论

selenium框架中driver.close()和driver.quit()关闭浏览器

Windows系统上，每次运行完selenium程序后，chromedriver.exe进程总是不能彻底关闭。网上参考了如下文章：https://www.freexyz.cn/article/201622.htmselenium操作chrome浏览器需要...

• 2021-01-13

518浏览

0评论

Pycharm-community-2020.2.3 社区版安装教程图文详解

1.安装step1step 2 首先是更改安装地址，推荐安装在D盘，如果和我一样C盘容量大的话，也可以不改，直接点击【Next】&#128516;step3 勾选所有即可，点击【Next】step4step 5.安装成功！...

• 2021-01-13

301浏览

0评论

Python中BeautifulSoup通过查找Id获取元素信息

比如如下的html他是在span标签下的class为name，id为is-like-span这样就可以通过这样的代码进行方法：isCliked = soup.find('span', id = 'is-like-span'通过这种方式去获取即...

• 2021-01-13

86浏览

0评论

用python对excel查重

最近媳妇工作上遇到一个重复性劳动，excel表格查重，重复的标记起来，问我能不能写个程序让它自动查重标记
必须安排
第一次正儿八经写python，边上网查资料，边写
终于成功了
在此记...

• 2021-01-13

202浏览

0评论

BeautifulSoup获取指定class样式的div的实现

如何获取指定的标签的内容是解析网页爬取数据的必要手段，比如想获取<div class='xxx'> ...<div>这样的div标签，通常有三种办法，1）用字符串查找方法,然后切分字符串（或切片操作），如s...

• 2021-01-13