Python

python利用eval方法提升dataframe运算性能

eval方法可以直接利用c语言的速度,而不用分配中间数组,不需要中间内存的占用.如果包含多个步骤,每个步骤都要分配一块内存importnumpyasnpimportpandasaspdimporttimeitdf=pd.DataFrame({'a':np.random.randn(10000000),'b':np.random.randn(10000000),'c':np.random.randn(10000000),'x':'x'})#printdfst

系统 2019-09-27 17:47:34 2223

Python

: Python

本文将从以下几点来介绍protobuf:1.安装2.定义protobuf消息格式3.编译protobuf4.读写protobuf1.安装下载protobuf。下载地址添加环境变量。将proto.exe所在的路径名放在path下。如图:2.定义protobuf消息格式我们将要使用的示例是一个非常简单的“地址簿”应用程序,可以在文件中读取和写入人员的联系人详细信息。地址簿中的每个人都有姓名,ID,电子邮件地址和联系电话号码。要创建地址簿应用程序,需要从.pro

系统 2019-09-27 17:46:17 2223

Python

Python进阶小结

目录一、异常TODO二、深浅拷贝2.1拷贝2.2浅拷贝2.3深拷贝三、数据类型内置方法3.1数字类型内置方法3.1.1整型3.1.2浮点型3.2字符串类型内置方法3.3列表类型内置方法3.4元祖类型内置方法3.5字典类型内置方法3.6集合类型内置方法3.7布尔类型四、数据类型分类4.1按值个数4.2按有序无序4.3按可变不可变一、异常TODO万能捕捉异常公式try:#逻辑代码1/0exceptExceptionase:print(e)divisionbyz

系统 2019-09-27 17:45:32 2223

Python

用Python的Django框架来制作一个RSS阅读器

Django带来了一个高级的聚合生成框架,它使得创建RSS和Atomfeeds变得非常容易。什么是RSS?什么是Atom?RSS和Atom都是基于XML的格式,你可以用它来提供有关你站点内容的自动更新的feed。了解更多关于RSS的可以访问http://www.whatisrss.com/,更多Atom的信息可以访问http://www.atomenabled.org/.想创建一个联合供稿的源(syndicationfeed),所需要做的只是写一个简短的p

系统 2019-09-27 17:38:46 2223

Python

python中常用的九种预处理方法分享

本文总结的是我们大家在python中常见的数据预处理方法,以下通过sklearn的preprocessing模块来介绍;1.标准化(StandardizationorMeanRemovalandVarianceScaling)变换后各维特征有0均值,单位方差。也叫z-score规范化(零均值规范化)。计算方式是将特征值减去均值,除以标准差。sklearn.preprocessing.scale(X)一般会把train和test集放在一起做标准化,或者在tr

系统 2019-09-27 17:38:06 2223

Python

用python记录运行pid,并在需要时kill掉它们的实例

我在跑爬虫程序的时候,由于爬虫程序的等待目标服务器返回数据的时间很长,而cpu占用很低,所以经常挂着代理一跑就跑好几百个。但是爬虫程序通常是写了死循环,或直到分配给该进程的任务都跑完才退出的。如果我们想中途结束掉这些任务,是没办法手工一个一个kill掉的。那么该如何结束这些进程呢?我的方法就是在运行爬虫进程时,记录该进程的Pid,然后在需要手动结束时,再用语句kill掉它们。foriin{1..100}donohuppythonNetEase_comms_

系统 2019-09-27 17:56:59 2222

Python

python的依赖管理的实现

主流开发语言的包管理工具一般都是支持依赖管理的,比如PHP的composer、Java的mvn。对于python来说又该如何管理依赖呢?pip基本用法python还不错,它提供了pip命令来安装依赖,同时pip会自动安装间接依赖,的确是很方便的。安装依赖的命令是pip,举个栗子:pipinstallrequests然后可以看到一些打印信息:Lookinginindexes:http://mirrors.aliyun.com/pypi/simpleRequi

系统 2019-09-27 17:56:22 2222

Python

python tkinter组件摆放方式详解

1.最小界面组成#导入tkinter模块importtkinter#创建主窗口对象root=tkinter.Tk()#设置窗口大小(最小值:像素)root.minsize(300,300)#创建一个按钮组件btn=tkinter.Button(root,text='屠龙宝刀,点击送')btn.pack()#加入消息循环root.mainloop()设置初始化界面大小#设置初始化界面大小root.geometry('300x400')2.组件的摆放方式:1.

系统 2019-09-27 17:55:39 2222

Python

Python分析42年高考数据,告诉你高考为什么这么难?

大数据文摘授权转载自数据森麟作者:徐麟对于已经工作的“上班族”来说,6月7号到9号三天无疑是兴奋到飞起的,终于迎来了令人愉悦的端午假期。然而有那么一群人,将在端午节日之际迎来人生特别重要的一次经历或者说是挑战,那就是高考生们。高考的重要性无须赘述,今天我们就来聊聊那些年我们一起经历的高考。历年录取率可能很多经历过高考的人都不知道高考的全称,高考实际上是普通高等学校招生全国统一考试的简称。从1977年国家恢复高考制度至今,高考经历了许多的改革,其中最为显著的

系统 2019-09-27 17:55:36 2222

Python

python爬取连续一字板股票及当时日期数据【原创分享】

本篇为个人测试记录,记录爬取连续一字板的股票及当时日期。importtushareastsimportpandasaspdimporttime#筛选一字板的策略defgp_rules(code):#获取某只股票的历史数据data=ts.get_hist_data(code,start='2018-01-01',end='2019-07-26')#排除该时间段无数据的股票ifdataisNone:return#筛选表头【开盘价,收盘价,涨幅】data_2=d

系统 2019-09-27 17:55:20 2222

Python

Python实现list反转实例汇总

本文实例总结了Python实现list反转的方法。分享给大家供大家参考。具体实现方法如下:下面有几个不同实现的函数复制代码代码如下:importmathdefresv(li):new=[]ifli:cnt=len(li)foriinrange(cnt):new.append(li[cnt-i-1])returnnewdefresv2(li):li.reverse()returnlidefresv3(li):hcnt=int(math.floor(len(l

系统 2019-09-27 17:54:32 2222

Python

Python拉勾网爬虫实现

拉勾网爬虫解析拉勾网网站:在拉勾网上输入关键词后我们可以得到相应的岗位信息(这里以Python为例),我们先获取到网站中所有的城市信息,再通过城市信息遍历爬取全国的Python职位信息。在数据包的Headers中我们可以得到网页头的相关信息,如网页URL、请求方法、Cookies信息、用户代理等相关信息。获取所有城市:classCrawlLaGou(object):def__init__(self):#使用session保存cookies信息self.la

系统 2019-09-27 17:52:08 2222

Python

Python Web版语音合成实例详解

前言语音合成技术能将用户输入的文字,转换成流畅自然的语音输出,并且可以支持语速、音调、音量设置,打破传统文字式人机交互的方式,让人机沟通更自然。应用场景将游戏场景中的公告、任务或派单信息通过语音播报,让玩家玩游戏或配送员送货的同时,也可接听新任务。文学小说类软件,可以利用百度语音合成技术将文学小说作品进行高质量的朗读,流畅清晰,解放双眼,畅听世界。软件架构Python3.7.2、Django2.1.7、baidu-aip(百度语音API)案例这里只展示部分

系统 2019-09-27 17:50:58 2222

Python

初学Python函数的笔记整理

定义返回单值defmy_abs(x):ifx>=0:returnxelse:return-x返回多值返回多值就是返回一个tupleimportmathdefmove(x,y,step,angle=0):nx=x+step*math.cos(angle)ny=y-step*math.sin(angle)returnnx,ny空函数defnop():pass指定默认参数必选参数在前,默认参数在后。默认参数需指向不可变对象(默认参数值在函数定义时被计算)defp

系统 2019-09-27 17:50:54 2222

Python

Python画图示例(4) 3D绘图

Python画图示例(1)一维数据集绘图Python画图示例(2)二维数据集绘图Python画图示例(3)其他绘图样式,散点图,直方图等Python画图示例(4)3D绘图importnumpyasnpimportmatplotlib.pyplotaspltstike=np.linspace(50,150,24)ttm=np.linspace(0.5,2.5,24)stike,ttm=np.meshgrid(stike,ttm)print(stike[:2]

系统 2019-09-27 17:50:08 2222