Python

python频繁写入文件时提速的方法

问题背景:有一批需要处理的文件,对于每一个文件,都需要调用同一个函数进行处理,相当耗时。有没有加速的办法呢?当然有啦,比如说你将这些文件分成若干批,每一个批次都调用自己写的python脚本进行处理,这样同时运行若干个python程序也可以进行加速。有没有更简单的方法呢?比如说,我一个运行的一个程序里面,同时分为多个线程,然后进行处理?大概思路:将这些个文件路径的list,分成若干个,至于分成多少,要看自己cpu核心有多少,比如你的cpu有32核的,理论上就

系统 2019-09-27 17:55:20 2725

Python

Python模拟登录12306的方法

本文实例讲述了Python模拟登录12306的方法。分享给大家供大家参考。具体实现方法如下:复制代码代码如下:#!/usr/bin/python#-*-coding:utf-8-*-importre;importsys;importcookielib;importurllib;importurllib2;importoptparse;importjson;importhttplib2;reload(sys)sys.setdefaultencoding('u

系统 2019-09-27 17:53:24 2725

Python

01 Python爬虫之Requests库入门

目录Requests库Requests库的7个主要方法Requests库的get()方法Requests库的head()方法Response对象的属性理解Requests库的异常爬取网页的通用代码框架HTTP协议协议对资源的操作理解PATCH和PUT的区别HTTP协议与Requests库Requests库主要方法解析Requests库Requests库的7个主要方法方法说明requests.request()构造一个请求,支撑以下各方法的基础方法reque

系统 2019-09-27 17:51:54 2725

Python

数据结构-树以及深度、广度优先遍历(递归和非递归,python实现)

前面我们介绍了队列、堆栈、链表,你亲自动手实践了吗?今天我们来到了树的部分,树在数据结构中是非常重要的一部分,树的应用有很多很多,树的种类也有很多很多,今天我们就先来创建一个普通的树。其他各种各样的树将来我将会一一为大家介绍,记得关注我的文章哦~首先,树的形状就是类似这个样子的:它最顶上面的点叫做树的根节点,一棵树也只能有一个根节点,在节点下面可以有多个子节点,子节点的数量,我们这里不做要求,而没有子节点的节点叫做叶子节点。好,关于树的基本概念就介绍到这里

系统 2019-09-27 17:49:42 2725

Python

Python脚本暴力破解栅栏密码

今天遇到一个要破解的栅栏密码,先给大家介绍通用的脚本。方法一(通用脚本):#!/usr/bin/envpython#-*-coding:gbk-*-#-*-coding:utf_-*-e=raw_input(‘请输入要解密的字符串\n‘)elen=len(e)field=[]foriinrange(,elen):if(elen%i==):field.append(i)forfinfield:b=elen/fresult={x:‘‘forxinrange(b

系统 2019-09-27 17:38:08 2725

Python

Python爬虫之爬取小说

(^_−)☆本喵的放松方式是看小说,而且类型不限,属于偏好成谜的那一种。所以从爬取完天气预报开始,我就开始想着爬取小说,编写了一个还不算完善的爬取小说程序,期待你们的完善。小说来源:努努书坊:https://www.kanunu8.com/山海经:https://www.kanunu8.com/book3/7766/index.html解析页面源代码:在页面源代码中我们可以看到url+1为每章节的内容链接小说名字:r'(.+)'章节目录:r'(.+)'小说

系统 2019-09-27 17:52:50 2724

Python

Python之变量、常量以及注释

Python之变量、常量以及注释一、什么是变量变量,是用于在内存中存放程序数据的容器,怎么理解呢?计算机的最核心的功能就是“计算”,计算需要数据源,数据源存在在内存里,比如我要把小明的姓名、身高、年龄信息存下来,后面程序会调用,该怎么存呢?直接设置——“变量名=值”即可。name="小明"age=22height=160#后面程序想调用的时候,直接调变量名即可print(name)#在控制台打印“小明”print(age)#在控制条打印“22”二、变量的使

系统 2019-09-27 17:46:52 2724

Python

Python调用阿里云的智能语音交互接口实现录音转文字

质量声明:原创文章,内容质量问题请评论吐槽。如对您产生干扰,可私信删除。主要参考:阿里云官方接口文档摘要:Python调用阿里云的智能语音交互接口,依靠对象存储服务(OSS)上传音频,实现录音文件识别,输出为txt文本。支持单轨/双轨的wav、mp3格式,最大支持文件512MB,最大录音时长2个小时。文章目录处理音频安装pydub安装ffmpeg音频处理程序上传至OSS录音识别程序识别结果处理音频由于阿里、百度、腾讯、讯飞等语音处理平台都对语音参数有特定要

系统 2019-09-27 17:50:23 2723

Python

基于Selenium+Python的web自动化测试框架

一、什么是Selenium?Selenium是一个基于浏览器的自动化测试工具,它提供了一种跨平台、跨浏览器的端到端的web自动化解决方案。Selenium主要包括三部分:SeleniumIDE、SeleniumWebDriver和SeleniumGrid。SeleniumIDE:Firefox的一个扩展,它可以进行录制回放,并把录制的操作以多种语言(例如java、python等)的形式导出成测试用例。SeleniumWebDriver:提供Web自动化所需

系统 2019-09-27 17:45:46 2723

Python

【Python爬虫】MongoDB爬虫实践:爬取虎扑论坛

MongoDB爬虫实践:爬取虎扑论坛网站地址为:https://bbs.hupu.com/bxj1.网站分析首先,定位网页上帖子名称、帖子链接、作者、作者链接、创建时间、回复数目、浏览数目、最后回复用户、最后回复时间等信息的位置,之后,我们使用BeautifulSoup在网页中定位这些。数据所在的位置数据位置某帖子所有数据‘li’帖子名称divclass="titlelinkbox">a帖子链接divclass="titlelinkbox">a['href

系统 2019-09-27 17:55:14 2722

Python

Python 条形图与直方图有非常大的区别

区别:首先,条形图是用条形的长度表示各类别频数的多少,其宽度(表示类别)则是固定的;直方图是用面积表示各组频数的多少,矩形的高度表示每一组的频数或频率,宽度则表示各组的组距,因此其高度与宽度均有意义。其次,由于分组数据具有连续性,直方图的各矩形通常是连续排列,而条形图则是分开排列。最后,条形图主要用于展示分类数据,而直方图则主要用于展示数据型数据,我们初中学的就是条形统计图,很显然有没有当初那种感觉?(身高-年龄条形统计图)在坐标上画出每个年龄对应的频数。

系统 2019-09-27 17:54:48 2722

Python

windows + python + opencv 打开双目摄像头

windows+python+opencv打开双目摄像头chusei3d操作环境出现的问题解决方法程序实现操作环境windows764位,chusei3dwebcam(单条usb),python3,opencv2,出现的问题chusei3d摄像头只有单条USB线,没法用opencv中的库直接调用两个摄像头。解决方法群里面只用使用ubuntu操作系统的解决方法,大致思路使用uvc协议向usb设备发送命令,接下来接收usb设备返回来的图像。通过发送不同的命令,

系统 2019-09-27 17:54:46 2722

Python

基于python自动化框架的报告格式分析

测试APP框架一:python+appium+unittestappium是对selenuim的封装,其中使用的是get_screenshot_as_base64方法获取页面截图的base64编码,故而框架使用时,生成的报告可进行自动捕捉异常,并进行截图放在报告里,具体可参考:https://github.com/GoverSky/HTMLTestRunner_cn文档进行报告完善,引用的报告是HTMLTestRunner,报告样式较为传统大概为:框架二:

系统 2019-09-27 17:50:54 2721

Python

Python win32com Excel二次开发

官方文档:Microsoft>>office开发人员中心ExcelGitHub>>MicrosoftDocs/VBA-Docs目录一、前沿二、库导入及类的初始化三、工作簿及工作表(Workbook&Worksheet)1、新建工作簿2、打开工作簿3、新建工作表4、删除工作表四、单元格及区域(Cell&Range)1、读取单元格的值2、设置单元格的值3、设置单元格格式4、区域(某一范围内的全部单元格)五、文件1、保存及关闭2、另存为3、退出六、枚举(Exce

系统 2019-09-27 17:48:12 2721

Python

Python读取图片EXIF信息类库介绍和使用实例

首先要介绍的是PythonImagingLibrary,使用方法如下:复制代码代码如下:fromPILimportImagefromPIL.ExifTagsimportTAGSdefget_exif_data(fname):"""GetembeddedEXIFdatafromimagefile."""ret={}try:img=Image.open(fname)ifhasattr(img,'_getexif'):exifinfo=img._getexif(

系统 2019-09-27 17:47:39 2721