前面十章爬虫笔记陆陆续续记录了一些简单的Python爬虫知识，用来解决简单的贴吧下载，绩点运算自然不在话下。不过要想批量下载大量的内容，比如知乎的所有的问答，那便显得游刃不有余了点。于是乎，爬虫框架Scrapy就这样出场了！Scrapy=Scrach+Python，Scrach这个单词是抓取的意思，Scrapy的官网地址：点我点我。那么下面来简单的演示一下Scrapy的安装流程。具体流程参照：//www.jb51.net/article/48607.htm
系统 2019-09-27 17:54:46 2034
作者：HelloGitHub-ProdesireHelloGitHub的《讲解开源项目》系列，项目地址：https://github.com/HelloGitHub-Team/Article一、nosenose是一个第三方单元测试框架，它完全兼容unittest，并且号称是一个更好用的测试框架。那么nose除了具备unittest的所有功能外，还具有哪些优势呢？1.1用例编写用例的编写方式除了编写继承于unittest.TestCase的测试类外，还可以编
系统 2019-09-27 17:54:38 2034
基本要点：程序中储存的所有数据都是对象(可变对象：值可以修改不可变对象：值不可修改)每个对象都有一个身份、一个类型、一个值例：>>>a1='abc'>>>type(a1)str创建一个字符串对象，其身份是指向它在内存中所处的指针(在内存中的位置)a1就是引用这个具体位置的名称使用type()函数查看其类型其值就是'abc'自定义类型使用class对象的类型用于描述对象的内部表示及其支持的方法和操作创建特定类型的对象，也将该对象称为该类型的实例，实例被创建后
系统 2019-09-27 17:54:28 2034
叨逼叨首先，介绍一下pdb调试，pdb是python的一个内置模块，用于命令行来调试Python代码。或许你会说，现在用Pycharm等编辑器来调试代码很方便，为啥要用命令行呢？这个问题，我曾经也这么想，直到有一次，代码必须要在Linux系统上跑（现在Pycharm也可以远程调试代码了，今天先不说这个）使用介绍如何添加断点？说到debug，肯定是要添加断点的，这里有两种方式添加断点：在想要断点代码后添加一行pdb.set_trace()若是使用这种方式，直
系统 2019-09-27 17:53:53 2034
1.python2/3区别整除python2:print'3/2=',3/2print'3//2=',3//2print'3/2.0=',3/2.0print'3//2.0=',3//2.0结果：3/2=13//2=13/2.0=1.53//2.0=1.0python3:print('3/2=',3/2)print('3//2=',3//2)print('3/2.0=',3/2.0)print('3//2.0=',3//2.0)3/2=1.53//2=13
系统 2019-09-27 17:53:32 2034
classRoom:def__init__(self,name,length,width):self.__name=nameself.__length=lengthself.__width=widthdefget_name(self):returnself.__namedefset_name(self,newName):iftype(newName)isstrandnewName.isdigit()==False:self.__name=newNameel
系统 2019-09-27 17:53:27 2034
本文实例讲述了Python实现一个简单的MySQL类。分享给大家供大家参考。具体实现方法如下：复制代码代码如下:#!/usr/bin/envpython#-*-coding:utf-8-*-#Createdon2011-2-19#@author:xiaoxiaoimportMySQLdbimportsys__all__=['MySQL']classMySQL(object):'''MySQL'''conn=''cursor=''def__init__(se
系统 2019-09-27 17:53:16 2034
python默认环境一般是ascii编码方式，因此Python自然调用ascii编码解码程序去处理字符流，当字符流不属于ascii范围内，就会抛出异常（ordinalnotinrange(128)）。参考可通过如下方式查看默认环境编码方式：importsysprintsys.getdefaultencoding()问题解决有两种方式：1、修改默认环境编码方式为utf-8importsysreload(sys)#不加这个会报”找不到setdefaultenc
系统 2019-09-27 17:52:42 2034
本文实例讲述了Python数据分析模块pandas用法。分享给大家供大家参考，具体如下：一介绍pandas（PythonDataAnalysisLibrary）是基于numpy的数据分析模块，提供了大量标准数据模型和高效操作大型数据集所需要的工具，可以说pandas是使得Python能够成为高效且强大的数据分析环境的重要因素之一。pandas主要提供了3种数据结构：1）Series，带标签的一维数组。2）DataFrame，带标签且大小可变的二维表格结构。
系统 2019-09-27 17:52:24 2034
本文实例讲述了Python基于BeautifulSoup和requests实现的爬虫功能。分享给大家供大家参考，具体如下：爬取的目标网页：http://www.qianlima.com/zb/area_305/这是一个招投标网站，我们使用python脚本爬取红框中的信息，包括链接网址、链接名称、时间等三项内容。使用到的Python库：BeautifulSoup、requests代码如下：#-*-coding:utf-8-*-importrequestsfr
系统 2019-09-27 17:52:10 2034
