- 军军小站|张军博客
拥有Python标签的文章
Python

python 一次学完列表生成式、生成器、迭代器、可迭代对象。

一、列表生成式ListComprehensionsPython内置的非常简单却强大的可以用来创建list的生成式。使用range和for循环创建In[21]:for循环后面还可以加上if判断还可以使用两层循环,可以生成全排列列表生成式也可以使用两个变量来生成list:二、生成器generator列表受到内存限制,容量肯定是有限的。而且,创建一个包含100万个元素的列表,不仅占用很大的存储空间,如果我们仅仅需要访问前面几个元素,那后面绝大多数元素占用的空间都

系统 2019-09-27 17:55:16 2185

Python

Python3爬虫模拟新浪微博登录(2019-8-3)最新

目录Python3爬虫模拟新浪微博登录过程分析遇到的坑关于第一步,账号和密码加密登录请求post数据包装关于登录后如跳转到主页面其他模块执行结果Python3爬虫模拟新浪微博登录初学Python3小白一枚,若有错误请不吝赐教过程分析整个过程从填写数据到跳转到主页一共经历了七个步骤:1.在登陆前,输入账号结束,失去输入框焦点,浏览器会发送两个请求,分别请求了登陆前加密密码所需的servertime、nonce、pubkey(图中对应3)2.第二个ajax请求

系统 2019-09-27 17:51:23 2185

Python

Python程序中的协程操作-greenlet模块

目录一、安装模块二、greenlet实现状态切换三、效率对比一、安装模块安装:pip3installgreenlet二、greenlet实现状态切换fromgreenletimportgreenletdefeat(name):print('%seat1'%name)g2.switch('nick')print('%seat2'%name)g2.switch()defplay(name):print('%splay1'%name)g1.switch()pri

系统 2019-09-27 17:46:57 2185

Python

Python优化技巧之利用ctypes提高执行速度

首先给大家分享一个个人在使用python的ctypes调用c库的时候遇到的一个小坑这次出问题的地方是一个C函数,返回值是malloc生成的字符串地址。平常使用也没问题,也用了有段时间,没发现什么异常。这次在测试中,发现使用这个过程会出现“段错误”,造成程序退出了。经过排查,确定问题原因是C函数的返回值问题,ctypes默认的函数返回类型是int类型。需要在使用中设置返回类型,例如:func.restype=c_char_p下面我们就来详细探讨下ctypes

系统 2019-09-27 17:38:19 2185

Python

python selenium 查找隐藏元素 自动播放视频功能

在使用python做爬虫的过程中,有些页面的的部分数据是通过js异步加载的,js调用接口的请求中有时还带有些加密的参数很难破解无法使用requests这样的包直接爬取数据,因此需要借助seleniu来完成js的自动加载。通过selenium模拟浏览器的真是操作来获取页面中的所有请求,并且可以查找到一下页面上一些隐藏的元素,这些元素在html源码中无法看到,并且和能通过xpath和正则来捕获,因此需要使用selenium来查找隐藏元素,例如视频网站的播放按钮

系统 2019-09-27 17:57:29 2184

Python

详解python中的with关键字

原文链接:https://blog.csdn.net/lu13093323120/article/details/82195060对于系统资源如文件、数据库连接、socket而言,应用程序打开这些资源并执行完业务逻辑之后,必须做的一件事就是要关闭(断开)该资源。如何正确的关闭一个文件呢?1.普通版deftest0():f=open("1.txt","w")f.write("0000")f.close()2.进阶版deftest1():f=open("1.t

系统 2019-09-27 17:52:58 2184

Python

对Python函数设计规范详解

Python函数的设计规范1、Python函数设计时具备耦合性和聚合性1)、耦合性:(1).尽可能通过参数接受输入,以及通过return产生输出以保证函数的独立性;(2).尽量减少使用全局变量进行函数间通信;(3).不要在函数中直接修改可变类型的参数;(4).避免直接改变定义在另外一个模块中的变量;2)、聚合性:(1).每个函数都应该有一个单一的、目的统一的目标;(2).每个函数的功能都应该相对简单;2、Python函数在脚本中应用示例例1:将/etc/p

系统 2019-09-27 17:49:05 2184

Python

Python爬虫运用正则表达式的方法和优缺点

前言我看到最近几部电影很火,查了一下猫眼电影上的数据,发现还有个榜单,里面有各种经典和热映电影的排行榜,然后我觉得电影封面图还挺好看的,想着一张一张下载真是费时费力,于是突发奇想,好像可以用一下最近学的东西实现我的需求,学习了正则表达式之后,想着要感受一下它在爬虫里面的效果和优缺点。目标:爬取Top100榜单上电影的封面图Top100榜单规则:将猫眼电影库中的经典影片,按照评分和评分人数从高到低综合排序取前100名,每天上午10点更新。相关数据来源于“猫眼

系统 2019-09-27 17:48:31 2184

Python

Python --我的常用函数

昆明地图defkmdt(x):importmatplotlib.pyplotaspltimportjsonwithopen('km.json','rb')asf:data=json.load(f)forfeainrange(len(data['features'])):df=data['features'][fea]['geometry']['coordinates']forf1inrange(len(df)):df1=df[f1]forf2inrange

系统 2019-09-27 17:46:53 2184

Python

机器学习:python实现LDA降维算法

这次,我们来学习一种经典的降维方法:线性判别分析(LinearDiscriminantAnalysis,以下简称LDA).在前面博客中(点我)我们讲解了PCA降维算法。PCA追求的是在降维之后能够最大化保持数据的内在信息,并通过衡量在投影方向上的数据方差的大小来衡量该方向的重要性。PCA优缺点:优点:1.最小误差2.提取了主要信息缺点:PCA将所有的样本(特征向量集合)作为一个整体对待,去寻找一个均方误差最小意义下的最优线性映射投影,而忽略了类别属性,而它

系统 2019-09-27 17:45:40 2184

Python

一篇文章弄懂Python中所有数组数据类型

前言数组类型是各种编程语言中基本的数组结构了,本文来盘点下Python中各种“数组”类型的实现。listtuplearray.arraystrbytesbytearray其实把以上类型都说成是数组是不准确的。这里把数组当作一个广义的概念,即把列表、序列、数组都当作array-like数据类型来理解。注意本文所有代码都是在Python3.7中跑的^_^0x00可变的动态列表listlist应该是Python最常用到的数组类型了。它的特点是可变的、能动态扩容,

系统 2019-09-27 17:57:38 2183

Python

Python pip安装lxml出错的问题解决办法

Pythonpip安装lxml出错的问题解决办法1.在使用pip安装lxml过程中出现了一下错误:>>>pipinstalllxmlC:\Users\Chen>pipinstalllxmlCollectinglxmlUsingcachedlxml-3.5.0.tar.gzInstallingcollectedpackages:lxmlRunningsetup.pyinstallforlxml...errorCompleteoutputfromcommand

系统 2019-09-27 17:56:40 2183

Python

python实现调用摄像头视频时用图片挡脸技术

体验一把某主播的快乐!添加好图片后,可以直接运行。importcv2if__name__=='__main__':#调用摄像头video=cv2.VideoCapture(0);#数据参数face_detector=cv2.CascadeClassifier("haarcascade_frontalface_alt.xml");k_face=cv2.imread("1.jpg")#循环调用摄像头获取-图片数据#从摄像头中获取图片#第一个参数:获取成功FAL

系统 2019-09-27 17:56:04 2183

Python

python and or用法详解

and和or是python的两个逻辑运算符,可以使用and,or来进行多个条件内容的判断。下面通过代码简单说明下andor的用法:1.or:当有一个条件为真时,该条件即为真。逻辑图如下:测试代码如下:a=raw_input('pleaseinputsomting:')ifa=='a'ora=='b':print'itisaorb'else:print'itisnotaorb'执行代码,输入a,b,ac,结果如下:pleaseinputsomting:ait

系统 2019-09-27 17:55:27 2183

Python

基于百度翻译API和python的批量地名翻译的实现

这次接到一个需求,需要把postgresql数据库中批量的地名进行翻译,大约200多个,自己翻译也非常的慢。于是想到用百度翻译的API对数据库的数据逐条进行翻译。正好也在学习Python语言,正好可以用Python对数据库的内容进行朱行翻译。数据如下所示:百度API标准版:提供基础文本翻译服务,QPS(每秒并发请求量)=1,个人或企业用户均可申请使用高级版:提供基础文本翻译服务,同时可申请自定义词表功能(敬请期待),QPS=10,供个人认证用户申请使用尊享

系统 2019-09-27 17:53:36 2183