拥有Python标签的文章
Python

用Python爬取需要登录的网站

最近我必须执行一项从一个需要登录的网站上爬取一些网页的操作。它没有我想象中那么简单,因此我决定为它写一个辅助教程。在本教程中,我们将从我们的bitbucket账户中爬取一个项目列表。教程中的代码可以从我的Github中找到。我们将会按照以下步骤进行:提取登录需要的详细信息执行站点登录爬取所需要的数据在本教程中,我使用了以下包(可以在requirements.txt中找到):requestslxml#步骤一:研究该网站打开登录页面进入以下页面“bitbuck

系统 2019-09-27 17:47:27 2079

Python

python实现控制电脑鼠标和键盘,登录QQ的方法示例

本文实例讲述了python实现控制电脑鼠标和键盘,登录QQ的方法。分享给大家供大家参考,具体如下:importosfrompynput.mouseimportButton,Controllerfrompynput.keyboardimportKeyfrompynput.keyboardimportControllerasWfromtimeimportsleepmouse=Controller()keyboard=W()#点击右下角刷新桌面图标mouse.p

系统 2019-09-27 17:47:11 2079

Python

centos7系统下python2与python3共存

第一步、查看python的版本号以及安装路径;通过以上的查看可以看到,python默认是指向到python2的,所以这里我们不动它,保持现状态即可。备注:(因为现在还有很多的系统更新都需要使用到pyhton2例如:Centos7的yum安装和更新。django这些框架现在默认又是使用python3)第二步、安装python3的相关依赖库,1.安装python3.7可能使用的依赖yum-yinstallopenssl-develbzip2-develexpa

系统 2019-09-27 17:47:05 2079

Python

Python中实现字符串类型与字典类型相互转换的方法

本文以实例形式简述了Python中字符串类型与字典类型相互转换的方法,是比较实用的功能。具体方法如下:一、字典(dict)转为字符串(string)我们可以比较容易的将字典(dict)类型转为字符串(string)类型。通过遍历dict中的所有元素就可以实现字典到字符串的转换:forkey,valueinsample_dic.items():print"\"%s\":\"%s\""%(key,value)二、字符串(string)转为字典(dict)如何将

系统 2019-09-27 17:46:40 2079

Python

python如何实现异步调用函数执行

在实现异步调用之前我们先进行什么是同步调用和异步调用同步:是指完成事务的逻辑,先执行第一个事务,如果阻塞了,会一直等待,直到这个事务完成,再执行第二个事务,顺序执行异步:是和同步相对的,异步是指在处理调用这个事务的之后,不会等待这个事务的处理结果,直接处理第二个事务去了,通过状态、通知、回调来通知调用者处理结果分析一下,下面的例子:定义了一个装饰器async和A、B两个function函数A里面sleep10s,然后打印afunction字符串B里面直接打

系统 2019-09-27 17:45:52 2079

Python

cdf的python支持

cdf(commondataformat)文件的python接口参考教程需要的库:Spacepy底层包:NASA’sCDFCDF下载安装wgethttps://spdf.gsfc.nasa.gov/pub/software/cdf/dist/cdf37_1/linux/cdf37_1-dist-all.tar.gztar-zxvfcdf37_1-dist-all.tar.gzcdcdf37_1-distmakeOS=linuxENV=gnuCURSES=y

系统 2019-09-27 17:45:41 2079

Python

文末送书 | Python绘图,我只用Matplotlib

原文链接:https://item.jd.com/12542555.html散点图散点图显示两组数据的值,如图1-1所示。每个点的坐标位置由变量的值决定,并由一组不连接的点完成,用于观察两种变量的相关性。例如,身高—体重、温度—维度。图1-1散点图示例使用Matplotlib的scatter()函数绘制散点图,其中x和y是相同长度的数组序列。scatter()函数的一般用法为:主要参数说明如下:•x,y:数组。•s:散点图中点的大小,可选。•c:散点图中点

系统 2019-09-27 17:45:27 2079

Python

Python MySQLdb模块连接操作mysql数据库实例

mysql是一个优秀的开源数据库,它现在的应用非常的广泛,因此很有必要简单的介绍一下用python操作mysql数据库的方法。python操作数据库需要安装一个第三方的模块,在http://mysql-python.sourceforge.net/有下载和文档。由于python的数据库模块有专门的数据库模块的规范,所以,其实不管使用哪种数据库的方法都大同小异的,这里就给出一段示范的代码:#-*-encoding:gb2312-*-importos,sys,

系统 2019-09-27 17:38:41 2079

Python

浅谈python 四种数值类型(int,long,float,complex)

Python支持四种不同的数值类型,包括int(整数)long(长整数)float(浮点实际值)complex(复数),本文章向码农介绍python四种数值类型,需要的朋友可以参考一下。数字数据类型存储数值。他们是不可改变的数据类型,这意味着改变数字数据类型的结果,在一个新分配的对象的值。Number对象被创建,当你给他们指派一个值。例如:var1=1var2=10您也可以删除数字对象的参考,使用del语句。del语句的语法是:delvar1[,var2[

系统 2019-09-27 17:38:28 2079

Python

Python中的rfind()方法使用详解

rfind()方法返回所在子str被找到的最后一个索引,或者-1,如果没有这样的索引不存在,可选择限制搜索字符串string[beg:end].语法以下是rfind()方法的语法:str.rfind(str,beg=0end=len(string))参数str--此选项指定要搜索的字符串beg--这是开始索引,默认情况下为0end--这是结束索引,默认情况下它等于该字符串的长度返回值此方法如果找到返回最后一个索引,否则返回-1例子下面的例子显示了rfind

系统 2019-09-27 17:38:04 2079

Python

基于Python的接口测试框架实例

背景最近公司在做消息推送,那么自然就会产生很多接口,测试的过程中需要调用接口,我就突然觉得是不是可以自己写一个测试框架?说干就干,由于现有的接口测试工具Jmeter、SoupUI等学习周期有点长,干脆自己写一个吧,不求人,所有功能自己都能一清二楚。当然,写工具造轮子只是学习的一种方式,现成成熟的工具肯定比我们自己的写的好用。开发环境-------------------------------------------------------------操作

系统 2019-09-27 17:37:53 2079

Python

python set tips

pythonsettypedosenotsupportindexinge.g.a=set([1,2])meansyoucan'tusea[1]ora[:1]etc.becausesetdosen'thaveorders.pythonsettips

系统 2019-08-29 22:16:18 2079

Python

python爬虫实现教程转换成 PDF 电子书

写爬虫似乎没有比用Python更合适了,Python社区提供的爬虫工具多得让你眼花缭乱,各种拿来就可以直接用的library分分钟就可以写出一个爬虫出来,今天就琢磨着写一个爬虫,将廖雪峰的Python教程爬下来做成PDF电子书方便大家离线阅读。开始写爬虫前,我们先来分析一下该网站1的页面结构,网页的左侧是教程的目录大纲,每个URL对应到右边的一篇文章,右侧上方是文章的标题,中间是文章的正文部分,正文内容是我们关心的重点,我们要爬的数据就是所有网页的正文部分

系统 2019-09-27 17:55:45 2078

Python

python 键盘中断子线程及graceful exiting方案

最近需要实现一个服务程序的gracefulexiting,保证在退出前关闭所有已创建的子线程python借助KeyboardInterrupted异常响应键盘中断,因此首先尝试在子线程中try-catch这个异常(失败)查阅原因,键盘中断只有主线程可以响应并处理,子线程无法收到这个异常。因此可以使用类似这样的结构:cond=Truedefstart_task():whilecond:#dosomethingdefterminate_task():#brea

系统 2019-09-27 17:55:29 2078

Python

python修改注册表终止360进程实例

本文实例讲述了python修改注册表终止360进程的实现方法。分享给大家供大家参考。具体实现代码如下:import_winregimportosimportshutil#复制自身shutil.copyfile(K3.exe,c:WINDOWSsystem32K3.exe)#把360启动改为自身run=_winreg.OpenKey(_winreg.HKEY_LOCAL_MACHINE,"SOFTWAREMicrosoftWindowsCurrentVers

系统 2019-09-27 17:55:20 2078