创建爬虫目录：scrapystartprojectspiderName调试命令scrapyshell网站名调试命令可直接进行css和xpath的调试；成功执行命令之后可使用：response.xpath(xpath表达式)获取所需的内容。xpath说明：XPath是一门在XML文档中查找信息的语言表达式描述实例nodename选取nodename节点的所有子节点//div/从根节点选取/div//不考虑位置选择节点//div.选取当前节点./div…选取当
系统 2019-09-27 17:56:45 1991
本文实例讲述了python实现动态创建类的方法。分享给大家供大家参考，具体如下：python作为动态语言，如何在运行时动态创建类呢(pythonCreatingclassesdynamically)，这在编程时，有时候很有用处,动态生成类，给予相应的属性和方法。通常来说有如下两种方式:1.根据条件，硬编码实现。2.利用typemetaclass来实现。根据条件硬编码defchoose_class(name):ifname=='foo':classFoo(o
系统 2019-09-27 17:56:45 1991
在打包镜像时，centos原生镜像中python版本为2.7。如果我们的服务基于python3版本，则需要手动安装。在安装时，有一点需要注意的是：由于系统中某些服务以来python2.7版本，因此不要去删除或修改系统中python的默认版本，否则会产生不可预知的后果。下面给出一个python3镜像打包示例:#baseimageFROMcentos:7.2.1511#installrelatedpackagesandpython3ENVENVIRONMENT
系统 2019-09-27 17:56:38 1991
#-*-coding=utf-8-*-importjsonimportrequestsheader={'User-Agent':'googlespider','Content-Encoding':'gzip','X-Forwarded-For':'202.101.43.22',}classBusiness(object):def__init__(self):passdefmy_JSONDecodeError(self):"""我出现JSONDecodeEr
系统 2019-09-27 17:56:35 1991
Python类的继承详解Python既然是面向对象的，当然支持类的继承，Python实现类的继承比JavaScript简单。Parent类：classParent:parentAttr=100def__init__(self):print("parentInit")defparentMethod(self):print("parentMethod")defsetAttr(self,attr):self.parentAttr=attrdefgetAttr(s
系统 2019-09-27 17:56:20 1991
一个简单的实现classNaiveFilter():'''FilterMessagesfromkeywordsverysimplefilterimplementation>>>f=NaiveFilter()>>>f.add("sexy")>>>f.filter("hellosexybaby")hello****baby'''def__init__(self):self.keywords=set([])defparse(self,path):forkeywo
系统 2019-09-27 17:56:10 1991
数据结构：通俗点说，就是储存大量数据的容器。这里主要介绍Python的4种基本数据结构：列表、字典、元组、集合。格式如下：列表：list=[val1,val2,val3,val4]，用中括号；字典：dict={key1:val1,key2:val2}，大括号，且每个元素是带有冒号的key与val的对应关系组；元组：tuple=(val1,val2,val3,val4)，小括号；集合：set={val1,val2,val3,val4}，大括号。1.列表：li
系统 2019-09-27 17:55:33 1991
最近新需求来了，要给系统增加几个资源权限。尽量减少代码的改动和程序的复杂程度。所以还是使用装饰器比较科学之前用了一些登录验证的现成装饰器模块。然后仿写一些用户管理部分的权限装饰器。比如下面这种defpermission_required(permission):defdecorator(f):@wraps(f)defdecorated_function(*args,**kwargs):ifnotcurrent_user.can(permission):ab
系统 2019-09-27 17:55:30 1991
本文实例展示了一个脚本python用来转化表配置数据xml并生成相应的解析代码。但是在中文编码上出现了乱码，现将解决方法分享出来供大家参考。具体方法如下：1.Python文件设置编码utf-8（文件前面加上#encoding=utf-8)2.MySQL数据库charset=utf-83.Python连接MySQL是加上参数charset=utf84.设置Python的默认编码为utf-8(sys.setdefaultencoding(utf-8)示例代码如
系统 2019-09-27 17:55:27 1991
Python中的条件语句与我之前学过的C，C++很相像，在Python里用and代替了&&(与运算符)，用or代替了||(或运算符)，而其他比较运算符如>，<，=，>=，<=，==，!=的用法和意义与C一致。在使用Python的if语句时，要注意冒号和缩进。最简单的if语句为if条件测试:要执行的内容如：a=5ifa>3:print("aislargerthan3")ifelse语句与此类似，如a=5ifa>3:print("aislargerthan3"
系统 2019-09-27 17:55:15 1991
前面说到了urllib2的简单入门，下面整理了一部分urllib2的使用细节。1.Proxy的设置urllib2默认会使用环境变量http_proxy来设置HTTPProxy。如果想在程序中明确控制Proxy而不受环境变量的影响，可以使用代理。新建test14来实现一个简单的代理Demo：复制代码代码如下:importurllib2enable_proxy=Trueproxy_handler=urllib2.ProxyHandler({"http":'ht
系统 2019-09-27 17:54:48 1991
什么是可变/不可变对象不可变对象，该对象所指向的内存中的值不能被改变。当改变某个变量时候，由于其所指的值不能被改变，相当于把原来的值复制一份后再改变，这会开辟一个新的地址，变量再指向这个新的地址。可变对象，该对象所指向的内存中的值可以被改变。变量（准确的说是引用）改变后，实际上是其所指的值直接发生改变，并没有发生复制行为，也没有开辟新的出地址，通俗点说就是原地改变。Python中，数值类型（int和float）、字符串str、元组tuple都是不可变类型。
系统 2019-09-27 17:54:37 1991
正则表达式什么是正则表达式？正则表达式是对字符串（包括普通字符（例如，a到z之间的字母）和特殊字符（称为“元字符”））操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，这个“规则字符串”用来表达对字符串的一种过滤逻辑。正则表达式是一种文本模式，该模式描述在搜索文本时要匹配的一个或多个字符串。正则表达式可以干什么?快速高效的查找与分析字符串进行有规律查找比对字符串，也叫：模式匹配具有查找、比对、匹配、替换、插入
系统 2019-09-27 17:54:35 1991
如下所示：classLogin(QMainWindow):"""登录窗口"""globalstatus_sglobalconnect_signaldef__init__(self,*args):super(Login,self).__init__(*args)ifgetattr(sys,'frozen',False):bundle_dir=sys._MEIPASSelse:bundle_dir=os.path.dirname(os.path.abspath
系统 2019-09-27 17:54:22 1991
在开始Python编程前，需要先安装Python环境。Python安装包可以到Python的官网下载，官网地址是https://www.python.org/，如果想直接跳过关于Python的介绍相关直接下载安装包，则可以直接访问https://www.python.org/downloads/下载安装包即可。Windows下安装Python要在Windows下安装Python，请按照下面的步骤进行：1、打开Web浏览器，访问https://www.pyt
系统 2019-09-27 17:54:19 1991
