最近需要爬取某网站，无奈页面都是JS渲染后生成的，普通的爬虫框架搞不定，于是想到用Phantomjs搭一个代理。Python调用Phantomjs貌似没有现成的第三方库（如果有，请告知小编），漫步了一圈，发现只有pyspider提供了现成的方案。简单试用了一下，感觉pyspider更像一个为新手打造的爬虫工具，好比一个老妈子，有时无微不至，有时喋喋不休。轻巧的小工具应该更受人喜爱，我也怀着一点私心，可以带着我最爱的BeautifulSoup一块儿用，而不用
系统 2019-09-27 17:38:44 2096
1、操作目录与文件名#!/usr/bin/envpython#-*-coding:utf-8-*-importos,reimportshutilimporttime用listdir搜索defsearch_OFD_old(my_pattern,diretory):try:names=os.listdir(diretory)exceptos.error:print"error"returnfornameinnames:fullname=os.path.norm
系统 2019-09-27 17:38:36 2096
核心代码：#!/usr/bin/python#-*-coding:gbk-*-#设置源文件输出格式importsysimportgetoptimportjsonimportcreateDictimportmyConToXMLimportmyConToTabledefgetRsDataToDict():#获取控制台中输入的参数，并根据参数找到源文件获取源数据csDict={}try:#通过getopt获取参数opts,args=getopt.getopt(s
系统 2019-09-27 17:38:33 2096
int数字类型classint(object):"""int(x=0)->intorlongint(x,base=10)->intorlongConvertanumberorstringtoaninteger,orreturn0ifnoargumentsaregiven.Ifxisfloatingpoint,theconversiontruncatestowardszero.Ifxisoutsidetheintegerrange,thefunctionre
系统 2019-09-27 17:38:22 2096
hasattr(object,name)作用：判断对象object是否包含名为name的特性（hasattr是通过调用getattr(ojbect,name)是否抛出异常来实现的）。示例：>>>hasattr(list,'append')True>>>hasattr(list,'add')Falsegetattr(object,name,default):作用：返回object的名称为name的属性的属性值，如果属性name存在，则直接返回其属性值；如果属
系统 2019-09-27 17:38:20 2096
字符串处理是非常常用的技能，但Python内置字符串方法太多，常常遗忘，为了便于快速参考，特地依据Python3.5.1给每个内置方法写了示例并进行了归类，便于大家索引。PS:可以点击概览内的绿色标题进入相应分类或者通过右侧边栏文章目录快速索引相应方法。大小写转换str.capitalize()将首字母转换成大写，需要注意的是如果首字没有大写形式，则返回原字符串。'adidog'.capitalize()#'Adidog''abcd徐'.capitaliz
系统 2019-09-27 17:37:47 2096
一、公司简介：个人单干好站，一个礼拜就能点到2美元左右了！二、每个点击1美分，下线提成每点0.5美分，每天5个左右点击,普通会员2美元自动支付三、支付方式：$2AP(免费申请AlertPay)起付四、点击数量：5个左右/天（1美分/个）六、如何注册：1、注册地址：http://www.Buxjobs.com/index.php?ref=504585922、打开上面的链接后点页面右上方Register打开注册页，如下图所示用英文或拼音字母及数字填表：七、如何
系统 2019-08-29 23:32:56 2096
dwr框架(菜鸟入门)该文可以看做是作者的学习笔记，部分内容可以认为是个人理解，请读者注意辨别。DWR（DirectWebRemoting）是一个开源的类库,可以帮助开发人员开发包含AJAX技术的网站.它可以允许在浏览器里的代码使用运行在WEB服务器上的JAVA函数,就像它就在浏览器里一样.DWR采取了一个类似AJAX的新方法来动态生成基于JAVA类的JavaScript代码.这样WEB开发人员就可以在JavaScript里使用Java代码就像它们是浏览器
系统 2019-08-29 23:31:24 2096
/*15ConvertsaBGRimagetoHSVcolorspace1617@parambgrimagetobeconverted1819@returnReturnsbgrconvertedtoa3-channel,32-bitHSVimagewith20SandVvaluesintherange[0,1]andHvalueintherange[0,360]21*/22IplImage*bgr2hsv(IplImage*bgr)23{24IplImag
系统 2019-08-29 23:28:00 2096
工厂方法(FactoryMethod)定义一个用于创建对象的接口，让子类决定实例哪一个类。工厂方法使一个类的实例化延迟到其子类。在工厂方法模式中，核心的工厂类不再负责所有产品的创建，而是将具体创建的工作交给子类去做。这个核心工厂则变为抽象工厂角色，仅负责给出工厂子类必须实现的接口，而不接触哪一产品创建的细节。工厂方法模式可以用来允许系统不修改具体工厂角色的情况下引进新产品在工厂方法模式中，一般都有一个平行的等级结构，抽象工厂对应抽象产品，具体工厂对应具体产
系统 2019-08-29 23:25:22 2096
