importpandasaspdimportosfromread_pgdataimportPostgredataroot_dir=r'root'file_names=os.listdir(root_dir)[:-1]print(len(file_names),file_names)pg=Postgredata()foriinrange(len(file_names)):df=pd.read_excel(root_dir+'\\'+file_names[i]
系统 2019-09-27 17:54:24 2292
python运维必须会用的库：1os,pathlib(系统操作库)2logging(运维用到的核心库，用于快速写入日志，非常好用)3pymysql,pymssql,cx_oracle(这些是常用数据库驱动，很多，不一一列举)4datetime(日期计算最常用的库),time(经常在统计性能的时候用到，以及sleep)5random(随机数库，时常会用到)6threading,multiprocessing(多线程，多进程，什么区别就不赘述了，自己百度),q
系统 2019-09-27 17:51:46 2292
前言写过的这些脚本有一个共性，都是和web相关的，总要用到获取链接的一些方法，累积不少爬虫抓站的经验，在此总结一下，那么以后做东西也就不用重复劳动了。1.最基本的抓站importurllib2content=urllib2.urlopen('http://XXXX').read()2.使用代理服务器这在某些情况下比较有用，比如IP被封了，或者比如IP访问的次数受到限制等等。importurllib2proxy_support=urllib2.ProxyHa
系统 2019-09-27 17:37:42 2292
下面介绍在Linux上利用python获取本机ip的方法.经过网上调查,发现大致有两种方法,一种是调用shell脚本,另一种是利用python中的socket等模块来得到,下面是这两种方法的源码:#!/usr/bin/envpython#encoding:utf-8#description:getlocalipaddressimportosimportsocket,fcntl,structdefget_ip():#注意外围使用双引号而非单引号,并且假设默认
系统 2019-09-27 17:50:19 2291
本书特色Amazon编程入门类榜首图书从基本概念到完整项目开发，帮助零基础读者迅速掌握Python编程上到有编程基础的程序员，下到10岁少年，想入门Python并达到可以开发实际项目的水平，本书是最佳选择！本书是一本全面的Python编程从入门到实践教程，带领读者快速掌握编程基础知识、编写出能解决实际问题的代码并开发复杂项目。书中内容分为基础篇和实战篇两部分。基础篇介绍基本的编程概念，如列表、字典、类和循环，并指导读者编写整洁且易于理解的代码。另外还介绍了
系统 2019-09-27 17:49:13 2291
如果需要一个简单的WebServer，而不是安装那些复杂的HTTP服务程序，比如：Apache，Nginx等。那么可以使用Python自带的包完成一个简单的内建HTTP服务器。于是，你可以把你的目录和文件都以HTTP的方式展示出来。基本命令python-mWeb服务器模块[端口号，默认8000]这里的“Web服务器模块”有如下三种：BaseHTTPServer:提供基本的Web服务和处理器类，分别是HTTPServer和BaseHTTPRequestHan
系统 2019-09-27 17:38:25 2291
Python字符串格式化使用"字符%格式1%格式2字符"%(变量1,变量2)，%格式表示接受变量的类型。简单的使用例子如下：#例：字符串格式化Name='17jo'print'www.%s.com'%Name>>www.17jo.comName='17jo'Zone='com'print'www.%s.%s'%(Name,Zone)>>www.17jo.com字符串格式化时百分号后面有不同的格式符号，代表要转换的不同类型，具体的表示符号如下面所示。格式符号
系统 2019-09-27 17:37:54 2291
参考：https://blog.csdn.net/jasonliujintao/article/details/77531519#coding:utf-8fromtimeimportsleepfromthreadingimportThreaddefasync(f):defwrapper(*args,**kwargs):thr=Thread(target=f,args=args,kwargs=kwargs)thr.start()returnwrappercl
系统 2019-09-27 17:55:56 2290
scipy的signal模块经常用于信号处理，卷积、傅里叶变换、各种滤波、差值算法等。*两个一维信号卷积>>>importnumpyasnp>>>x=np.array([1,2,3])>>>h=np.array([4,5,6])>>>importscipy.signal>>>scipy.signal.convolve(x,h)#卷积运算array([4,13,28,27,18])卷积运算大致可以分成3步，首先先翻转，让两个信号列反过来，如上面就是1,2,3
系统 2019-09-27 17:55:19 2290
多任务编程意义：充分利用计算机的资源提高程序的运行效率定义：通过应用程序利用计算机多个核心，达到同时执行多个任务的目的实施方案：多进程、多线程并行：多个计算机核心并行的同时处理多个任务并发：内核在多个任务间不断切换，达到好像内核在同时处理多个任务的运行效果进程：程序在计算机中运行一次的过程程序：是一个可执行文件，是静态的，占有磁盘，不占有计算机运行资源进程：进程是一个动态的过程描述，占有CPU内存等计算机资源的，有一定的生命周期*同一个程序的不同执行过程是
系统 2019-09-27 17:55:19 2290
原文链接：https://mp.weixin.qq.com/s/7Ktv-cYNNT82ECVGevUyzg#rd作者|大咪来源|咪哥杂谈（ID:migezatan）1前言接下来的两篇文章介绍下，如何使用requests库玩转高德地图！说是玩转，不如通俗的说是用requests库来请求高德地图为我们提供的官方API。本篇是介绍地图业务相关性的知识点（无编码），下一篇才涉及编码。API：有人不了解的话，我给你们解释下。你可以想象成一个网页，你只要访问它，它就
系统 2019-09-27 17:55:16 2290
摘要：有时候我们只需要数据集中的一部分，并不需要全部的数据。这个时候我们就要对数据集进行随机的抽样。pandas中自带有抽样的方法。应用场景：我有10W行数据，每一行都11列的属性。现在，我们只需要随机抽取其中的2W行。实现方法很简单：利用Pandas库中的sample。DataFrame.sample(n=None,frac=None,replace=False,weights=None,random_state=None,axis=None)n是要抽取
系统 2019-09-27 17:54:34 2290
1.简介在编写代码时，往往涉及时间、日期、时间戳的相互转换。2.引入模块#引入模块importtime,datetime2.1str类型的日期转换为时间戳利用strptime()函数将时间转换成时间数组利用mktime()函数将时间数组转换成时间戳#字符类型的时间tss1='2013-10-1023:40:00'#转为时间数组timeArray=time.strptime(tss1,"%Y-%m-%d%H:%M:%S")printtimeArray#tim
系统 2019-09-27 17:50:41 2290
何为标准化：在数据分析之前，我们通常需要先将数据标准化（normalization），利用标准化后的数据进行数据分析。数据标准化也就是统计数据的指数化。数据标准化处理主要包括数据同趋化处理和无量纲化处理两个方面。数据同趋化处理主要解决不同性质数据问题，对不同性质指标直接加总不能正确反映不同作用力的综合结果，须先考虑改变逆指标数据性质，使所有指标对测评方案的作用力同趋化，再加总才能得出正确结果。数据无量纲化处理主要解决数据的可比性。几种标准化方法：归一化Ma
系统 2019-09-27 17:50:12 2290
尽管Django的流行和普及，一些开发者仍然认为她是一个过时的web开发框架，仅仅适合内容丰富的web程序。然而现在大多数web程序往往不是富内容的，这似乎让Django看起来不是最佳选择的web框架。那么让我们花点时间从现在的web开发实践中重新认识下她吧。简单清晰的Django一个web框架主要是帮助web程序生成核心的架构，以便在其他的项目中重用。Django正是以此为基础，快速构建web程序。Django的核心主要是WSGI程序，通过处理HTTP请
系统 2019-09-27 17:49:01 2290
