准备在断网的和联网的机器安装pip，下载地址https://pypi.python.org/pypi/pip在联网的开发机器上安装好需要的包例如：pip3installparamikopip3installfabric打包已安装的包新建pyenv文件夹用来存储下载下来的所需安装包pip3list#查看安装的包#使用pip导出当前环境所有依赖包信息文件pip3freeze>requirements.txt#下载所有依赖包到本地pip3install-rreq
系统 2019-09-27 17:54:56 2038
闲的无聊。。。网上一堆，正好练手（主要是新手）#coding=utf-8importrequestsfrombs4importBeautifulSoupheaders={'user-agent':'Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/56.0.2924.87Safari/537.36','origin':'https://www.v2ex.
系统 2019-09-27 17:54:30 2038
说到流处理，Spark为我们提供了窗口函数，允许在滑动数据窗口上应用转换，常用场景如每五分钟商场人流密度、每分钟流量等等，接下来我们通过画图来了解SparkStreaming的窗口函数如何工作的，处理过程图如下所示：上图中绿色的小框框是一批一批的数据流，虚线框和实线框分别是前一个窗口和后一个窗口，从图中可以看出后一个窗口在前一个窗口基础上移动了两个批次的数据流，而我们真正通过算子操作的数据其实就是窗口内所有的数据流。在代码实现前了解下窗口操作常用的函数有：
系统 2019-09-27 17:52:34 2038
原型模式，也是用于创建对象时的一种设计方法。主要应用场景是：每次初始化某个对象时，需要传递大量的参数，很不方便，此时，可以使用原型模式，在已经创建并初始化的对象基础上，可以快速而又方便创建新的不同对象。主要原理：使用深拷贝，复制一个已创建的对象，然后使用__dict__.update（）方法更新已创建对象中的参数值方式创建新对象。背景知识：在python中的类中，__dict__是一个字典，保存了所有该类中的变量，函数等参数。#coding=utf-8im
系统 2019-09-27 17:52:15 2038
2019-09-18-21:11:24(初学者不会学博客,望大家见谅见谅)今天学的内容是有关list.、dict、set集合的使用方法和注意事项list和dict在循环中不可删,而且list在迭代输出时进行删除是会导致索引跟着改变所以一般list不在循环过程中进行删除list和dict要进行删除时,应该把要删除的记录到另一个列表中,然后在进行删除深浅拷贝:浅拷贝只拷贝第一层的内容,而深拷贝是全部内容都进行了拷贝下面是总结的内容:一.重要知识点1.str.j
系统 2019-09-27 17:51:29 2038
a=input("a=")b=input("b=")c=int(a)+int(b)print(c)结果：/usr/bin/python3.6/home/rooter/PycharmProjects/python1/pp1a=4b=48Processfinishedwithexitcode0a=input("a=")b=input("b=")c=a+b#或者c=int(a+b)/c=str(a+b)print(c)结果/usr/bin/python3.6/h
系统 2019-09-27 17:51:10 2038
模块Module定义包含一系列数据、函数、类的文件，通常以.py结尾。作用让一些相关的数据，函数，类有逻辑的组织在一起，使逻辑结构更加清晰。有利于多人合作开发。导入import1.语法：import模块名import模块名as别名2.作用：将某模块整体导入到当前模块中3.使用：模块名.成员fromimport1.语法：from模块名import成员名[as别名1]作用：将模块内的一个或多个成员导入到当前模块的作用域中。fromimport*1.语法：fro
系统 2019-09-27 17:51:00 2038
作为Python程序员，应该能够正视Python的优点与缺点。众所周之，Python的运行速度是很慢的，特别是大数据量的运算时，Python会慢得让人难以忍受。对于这种情况，“专业”的解决方案是用上numpy或者opencl。不过有时候为了一点小功能用上这种重型的解决方案很不划算，或者有时候想要实现的操作在numpy里面没有，需要我们自己用C语言来编写。总之，我们使用Python与C++的混合编程能够加快程序热点的运算速度。首先要提醒大家注意的是，在考虑联
系统 2019-09-27 17:50:45 2038
说起Python强大的地方，你可能想到是它的优雅、简洁、开发速度快，社区活跃度高。但真正使得这门语言经久不衰的一个重要原因是它的无所不能，因为社区有各种各样的第三库，使得我们用Python实现一个东西实在是太简单了，你经常会看到几行代码实现爬虫，10行代码实现人脸识别，虽然有些夸张，但确实就是有这样的库帮你把所有的繁文缛节全部封装了，最后给你开放一个优雅的API。今天给你推荐的这个库叫“FuckIt.py”，名字一看就是很黄很暴力的那种，作者是这样介绍它的
系统 2019-09-27 17:50:33 2038
这里先解释一下几个概念-位置参数:按位置设置的参数,隐式用元组保存对应形参.平时我们用的大多数是按位置传参.比如有函数deffunc(a,b,c),调用func(1,2,3).即a=1,b=2,c=3-关键字参数:可以通过关键字设置参数,不用关心参数位置,隐式用字典保存形参.比如有函数deffunc(a,b,c),调用func(b=1,c=2,a=3),即a=3,b=1,c=2普通格式复制代码代码如下:deffunc(opt_args):...return
系统 2019-09-27 17:50:13 2038
列表列表是内建的数据结构，用来存储一系列元素。列表与字符串相同点：都支持索引（[]运算符）、切片（[:]）、拼接（+）、重复（*）、成员（in运算符）、长度（len()函数）和循环（for）操作。不同点：列表使用[]生成，元素之间用逗号分离，字符串使用成对引号生成；列表可以包含多种类型的对象，字符串只能是字符；列表的内容是可变的，字符串一旦生成就不可变。列表的可变性可以对列表中的任意元素进行重新赋值，如：lst[0]=‘a’可以通过切片操作对子列表进行赋值
系统 2019-09-27 17:49:26 2038
目录：1.数据分析模块2.数据文件导入3.图形绘制4.读取数据并可视化分析1.数据分析模块importnumpyasnn#一维数组numpy.array([元素1，元素2....，元素n])x=nn.array(['2','3','d','g'])#print(x)#创建二维数组格式numpy.array([[元素1]，[元素2]....，[元素n]])y=nn.array([[2,3,4],[4,3,4,],[34,4,2,]])#print(y)#排序
系统 2019-09-27 17:48:18 2038
django在一个项目的目录结构划分方面缺乏必要的规范，因此不同人的项目组织形式也千奇百怪，而且也很难说谁的做法就比较好。我根据自己的项目组织习惯，发布了一个项目dj-scaffold。前些天在reddit上为我的项目dj-scaffold打了个“广告”（见：http://redd.it/kw5d4）。不想评价甚糟，甚至差点被打成负分。其中更也人将这个项目说的一文不值。面对负面声音虽然会有些不爽，但其中的建设性意见还是需要听取的，至于那些纯属个人偏好部分就
系统 2019-09-27 17:46:10 2038
闭包(closure)是函数式编程的重要的语法结构。函数式编程是一种编程范式(而面向过程编程和面向对象编程也都是编程范式)。在面向过程编程中，我们见到过函数(function)；在面向对象编程中，我们见过对象(object)。函数和对象的根本目的是以某种逻辑方式组织代码，并提高代码的可重复使用性(reusability)。闭包也是一种组织代码的结构，它同样提高了代码的可重复使用性。不同的语言实现闭包的方式不同。Python以函数对象为基础，为闭包这一语法结
系统 2019-09-27 17:45:45 2038
importsubprocessoutput=Popen(["mycmd","myarg"],stdout=PIPE).communicate()[0]importsubprocessp=subprocess.Popen(['ls','-a'],stdout=subprocess.PIPE,stderr=subprocess.PIPE)out,err=p.communicate()printout#workonUnix/Linuxonlyimportcom
系统 2019-09-27 17:45:26 2038
