之前想爬取一些淘宝的数据，后来发现需要登录，找了很多的资料，有个使用request的sessions加上cookie来登录的，cookie的获取在登录后使用开发者工具可以找到。不过这个登录后获得的网页的代码是静态的，获取动态网页还得另寻他法，一般需要的数据可以在网页的源码中得到，但是你知道的，有些动态加载的就不是那么简单了，而且我发现这样获得的源码中，有些想要获取的数据的格式是经过改动的，比如我要某个商品的具体链接，发现并不能直接使用。总体而言，这是一次失
系统 2019-09-27 17:54:47 2122
#!/usr/bin/python#-*-coding:UTF-8-*-#######################################createdbybasededato####2018-01-02####监控#####################################importosimportjsonclassMonitor(object):def__init__(self,Cmd):self.Cmd=Cmd#vmsta
系统 2019-09-27 17:53:33 2122
函数的嵌套在Python编程语言中，在函数体内创建另外一个函数（对象，因为Python一切皆对象，函数其实也是对象）是完全合法的，这种函数叫做内部/嵌套函数。例子：#coding:utf-8defouter():definner():print("isInnerMethod")print("IsouterMethod")inner()#调用outer函数outer()#调用outer()的内部函数，报错#inner()运行结果：IsouterMethodi
系统 2019-09-27 17:52:56 2122
将做工程过程中重要的一些代码段收藏起来，下面代码段是关于python检测RabbitMQ的状态是否正常的代码。importsocketdefcheck_aliveness(ip,port):sk=socket.socket(socket.AF_INET,socket.SOCK_STREAM)sk.settimeout(1)try:sk.connect((ip,port))print'serviceisOK!'returnTrueexceptExceptio
系统 2019-09-27 17:52:41 2122
在学习转换之前先了解以下它们的基本概念RDD：弹性分布式数据集，是一个只读分区集合DataFrame：以命名列方式组织的分布式数据集，概念上和关系型数据库的一张表一样DataSet：分布式数据集合，Python暂时不支持了解了基本的概念之后，接下来我们通过代码编写三种数据集的形成RDD的形成frompyspark.sqlimportSparkSessionif__name__=='__main__':spark=SparkSession\.builder\
系统 2019-09-27 17:52:31 2122
Python语言与Perl，C和Java等语言有许多相似之处，也有一定的差异性，以下是Python语言获取文件后缀名和文件名的方法：#Python获取文件后缀名的方法importos.pathdeffile_extension(path):returnos.path.splitext(path)[1]printfile_extension('/py/a.py')输出：.py#Python获取目录和文件名importos.pathdeffile_extens
系统 2019-09-27 17:52:22 2122
原型模式，也是用于创建对象时的一种设计方法。主要应用场景是：每次初始化某个对象时，需要传递大量的参数，很不方便，此时，可以使用原型模式，在已经创建并初始化的对象基础上，可以快速而又方便创建新的不同对象。主要原理：使用深拷贝，复制一个已创建的对象，然后使用__dict__.update（）方法更新已创建对象中的参数值方式创建新对象。背景知识：在python中的类中，__dict__是一个字典，保存了所有该类中的变量，函数等参数。#coding=utf-8im
系统 2019-09-27 17:52:15 2122
闲暇之余，在家里自建了个服务器，因为用的小区宽带，IP位动态分配。域名解析就是个问题，我的域名一般停放在DNSPod下。DNSPod有提供修改的API，就用Python简单的实现了一下动态解析。这样，就不用安装花生壳了。废话不说，看代码：#!/usr/bin/envpython#-*-coding:utf-8-*-importhttplib,urllib,urllib2importtimeimportsys,osimportreimportjsonuser
系统 2019-09-27 17:52:14 2122
漫谈如果作为一个Python入门，不了解Python装饰器也没什么，但是如果作为一个中级Python开发人员，如果再不对python装饰器熟稔于心的话，那么可能并没有量变积累到质变。我以前也看过很多讲python装饰器的文章，但是都是看了就忘。一方面是没有做太多的练习，二是对它的领会不是很深。希望引以为戒！！！郑传装饰模式如果你了解Java，你肯定听过装饰器模式。在面向对象中，装饰模式指：动态地给一个对象添加一些额外的职责。就增加一些功能来说，装饰模式比生
系统 2019-09-27 17:51:05 2122
Python这门解释性语言也有专门的线程模型，Python虚拟机使用GIL（GlobalInterpreterLock，全局解释器锁）来互斥线程对共享资源的访问，但暂时无法利用多处理器的优势。在Python中我们主要是通过thread和threading这两个模块来实现的，其中Python的threading模块是对thread做了一些包装的，可以更加方便的被使用，所以我们使用threading模块实现多线程编程。这篇文章我们主要来看看Python对多线程
系统 2019-09-27 17:51:00 2122
