在之前学习的RDD和DataFrame数据集主要处理的是离线数据，随着时代发展进步，我们会发现越来越多数据是在源源不断发回到数据中心，同时需要立刻响应给用户，这样的情况我们就会用到实时处理，常用的场景有实时显示某商场一小时人流密度、实时显示当天火车站人口总数等等。接下来从实时数据源说起，实时数据源主要有：FileSourceSocketSourceFlumeSourceKafkaSourceFileSource指的是文件作为数据来源，常用的有本地文件fil
系统 2019-09-27 17:52:32 1801
如果选择一门编程语言来入门黑客攻防的话，你觉得哪个最合适？不如来试试Python，或许会是一次很好的尝试哦~Python语言的优点目前，Python在各领域都有着广泛的应用。由此可见，作为一种编程开发语言，Python拥有众多优点，其语法简单易学且支持多种库，相同代码可以运行于多种平台。■易学易用学习一种新编程语言时，往往会遇到各种各样的问题。为了解决这些问题，Python语言做了大量努力。比如，Python中不必声明变量类型，而在运行时动态确定。此外，也
系统 2019-09-27 17:52:20 1801
目录一、执行Python程序的两种方式1.1交互式1.2命令行式二、变量2.1什么是变量2.2如何定义变量2.3变量的组成2.4变量名的规范2.5变量名的两种命名风格三、常量四、Python变量内存管理4.1引用计数4.2垃圾回收机制4.3小整数池五、花式赋值5.1链式赋值5.2交叉赋值六、注释6.1单行注释6.2多行注释七、数据类型基础7.1为什么要有数据类型八、解压缩九、Python与用户交互十、Python格式化输出的三种方式10.1占位符%10.2
系统 2019-09-27 17:51:57 1801
一、背景今天闲着无事，写了一个小小的Python脚本程序，然后给同学炫耀的时候，发现每次都得拉着其他人过来看着自己的电脑屏幕，感觉不是很爽，然后我想着网上肯定有关于Python脚本转换成可执行文件的操作，事不宜迟，我就开始了问度娘，各种寻找资料，发现网上的资料太多了，有一些比较老了，适合Python2.x系列，在现在Python3流行的时代，我们当然是直接无视，但是各种方法凌乱的很，各种教程也是或全或缺的，鄙人也捣鼓了可久，后来发现一种方法挺多人用的，在自
系统 2019-09-27 17:51:28 1801
Socket是网络应用的基础。而Python使得网络socket编程入门变得超级简单。在这篇简介里面我们将创建一个简单服务器，用于接受和相应客户端程序的请求。由于本人最近对LinuxContainers有点痴迷，因此我们也将在服务器中实现2个容器。同时在容器中我们在几秒钟内就能创建其他一些主机，这就能非常简单的模拟出一个网络。创建容器我使用的是Ubuntu14.04.然后用root用户运行下面的命令就可以创建好2个容器了。复制代码代码如下:lxc-crea
系统 2019-09-27 17:51:21 1801
一、定义函数def函数名():函数体代码例：#定义函数defemail():print('sendemail')#调用执行函数email()二、函数的返回值defemail():print("sendemail")return"发送成功"#没有return，默认返回Noneret=email()#函数return后面是什么值，ret等于返回值print(ret)注意：一旦遇到return,函数内部return以下的代码不再执行。三、函数的普通参数defem
系统 2019-09-27 17:51:12 1801
函数：split()Python中有split()和os.path.split()两个函数，具体作用如下：split()：拆分字符串。通过指定分隔符对字符串进行切片，并返回分割后的字符串列表（list）os.path.split()：按照路径将文件名和路径分割开一、函数说明1、split()函数语法：str.split(str="",num=string.count(str))[n]参数说明：str：表示为分隔符，默认为空格，但是不能为空('')。若字符串
系统 2019-09-27 17:50:49 1801
bsddb模块是用来操作bdb的模块，bdb是著名的BerkeleyDB，它的性能非常好，mysql的存储后端引擎都支持bdb的方式。这里简单介绍一些关于bsddb的使用方法。bdb不同于一般的关系数据库，它存储的数据只能是以key和value组成的一对数据，使用就像python的字典一样，它不能直接表示多个字段，当要存储多个字段的数据时，只能把数据作为一个整体存放到value中。使用bsddb面临的第一问题是使用什么数据访问方法，bdb支持四种：btre
系统 2019-09-27 17:50:30 1801
这两天一直在windows上做用python（版本是3.6）抽取pdf中内容的东西，主要就是从pdf中提取出里面的字体和表格内容。尝试了好些个库，现在算是找到比较符合我需求（比较好用）的pdf解析的了。在这个过程中，用了以下几个库：PDFminerPDFminer算是一个还算不错的吧，安装直接用pip安装就行。如下：pipinstallpdfminer3k它这个对pdf中内容做了好些个对象，用这些对象来存储不同的信息，比如表格有LTFigure对象存储、文
系统 2019-09-27 17:50:26 1801
递归一个函数在执行过程中一次或多次调用其本身便是递归，就像是俄罗斯套娃一样，一个娃娃里包含另一个娃娃。递归其实是程序设计语言学习过程中很快就会接触到的东西，但有关递归的理解可能还会有一些遗漏，下面对此方面进行更加深入的理解递归的分类这里根据递归调用的数量分为线性递归、二路递归与多重递归线性递归如果一个递归调用最多开始一个其他递归调用，我们称之为线性递归。例如：defbinary_search(data,target,low,high):"""二分查找，对有
系统 2019-09-27 17:50:01 1801
