0x00:使用xpath进行网页解析#coding:utf-8importrequestsimportosimportrefromlxmlimportetreeimporttimedefget_title(title):#获取标题，创建文件path=r"./Pic/"+titleifos.path.exists(path):#文件夹存在，返回returnpathelse:os.makedirs(path)#创建空文件夹returnpathdefpic_ge
系统 2019-09-27 17:48:15 1829
Importos;--Python自带print(os.getcwd())--获得当前工作目录os.chdir('/Users/longlong/Documents')--转换到/Users/longlong/Documents目录os.path.join(parm1,parm2,...)--从一个或多个路径片段中构造一个路径名。os.path.expanduser()--用来将包含～符号的路径扩展为完整的路径复制代码代码如下:>>>pathname='/
系统 2019-09-27 17:48:14 1829
python的fnmatch还真是省心，相比于java中的FilenameFilter，真是好太多了，你完成不需要去实现什么接口。fnmatch配合os.walk()或者os.listdir()，你能做的事太多了，而且用起来相当easy。#coding:utf-8"""遍历C盘下的所有dll文件"""importosimportfnmatchdefmain():f=open('dll_list.txt','w')forroot,dirs,filesinos
系统 2019-09-27 17:48:05 1829
什么是Python？Python是一种功能强大的高级编程语言，主要用于科学和工程计算。它是一种高效的语言，优雅务实，简单而强大，适合新手和专业人士的编程。Python支持多种编程范例，并提出了一个大型标准库，包括面向对象，命令式，功能性和程序性。Go是什么？Go是一种通用编程语言，由Google设计；它借鉴了许多其他许多好主意语言，同时避免导致复杂性和不可靠代码的功能。Go支持多范式，如程序，功能和并发。它的语法传统上来自C语言，但它已经做了很多修改，以改
系统 2019-09-27 17:48:01 1829
因为Python是自带文档，可以通过help函数来查询每一个系统函数的用法解释说明。一般来说，关键的使用方法和注意点在这个系统的文档中都说的很清楚。我试图在网上找过系统文档的中文版的函数功能解释，但是都没有找到，所以我决定将就使用英文版的系统自带的函数解释来学习。如果你想进行Tkinter和wxPython编程，想要知道一般的widget的使用方法和属性介绍，英文又不是太好的话，我推荐你，你可以去看看《Python与Tkinter编程》这本书，里面392页
系统 2019-09-27 17:47:58 1829
当年学爬虫的第一个想法就是想把双色球的数据爬下来，然后看能不能用什么牛叉的算法，或者数据分析把后面的双色球概率算出来；知道现在才抽空写了这几行代码爬取了双色球的数据，我也真是够懒的；也算是闲来无事，练手的爬虫吧；好了，多余的就不说了，直接上代码吧，代码注释已经很清楚了；importsysimportrequestsfromlxmlimportetreedefget_url(url):#请求url的方法，返回htmlheaders={'User-Agent'
系统 2019-09-27 17:47:57 1829
代码一：#!/usr/bin/python#-*-coding:utf-8-*-#encoding=utf-8importthreadingimportQueueimportsysimporturllib2importreimportMySQLdb##数据库变量设置#DB_HOST='127.0.0.1'DB_USER="XXXX"DB_PASSWD="XXXXXXXX"DB_NAME="xxxx"##变量设置#THREAD_LIMIT=3jobs=Que
系统 2019-09-27 17:47:49 1829
windows10：1，先要pip安装pydotplus和graphviz：pipinstallpydotpluspipinstallgraphviz2，www.graphviz.org下载msi文件并安装。3，系统环境变量path中增加两项：C:\ProgramFiles(x86)\Graphviz2.38\binC:\ProgramFiles(x86)\Graphviz2.38#确认graphviz是安装在上面路径当中。4，python中使用方法：fr
系统 2019-09-27 17:47:26 1829
在python中可以使用in符号判断指定的元素是否存在于列表中，但我发现元组和数组存在区别，下面是详细实验结果。>>>'jb51.net'in['haotu.net','jb51.net']True>>>'jb51.net'in('haotu.net','jb51.net')True>>>'jb51.net'in['jb51.net/codes','haotu.net']False>>>'jb51.net'in('jb51.net/codes','haot
系统 2019-09-27 17:47:15 1829
抓取动态的网页内容主要有两种办法，一种是通过开发者工具找到动态内容的接口，然后分析接口的参数和返回值来爬取网站的数据。另外一种是通过模拟浏览器来抓取数据。python的Selenium库就可以通过代码来模拟浏览器抓取数据。一、概述运行Selenium需要依赖于Python的selenium库，以及浏览器对应驱动器（WebDriver）。安装selenium库pipinstallselenium项目地址：https://pypi.org/project/se
系统 2019-09-27 17:47:10 1829
Python进行Redis数据迁移由于开发时的误操作，导致redis数据损坏，所以需要进行redis的数据迁移，网上大佬的教程基本都是需要下载附加工具，亦或是需要一些复杂的操作，个人觉得麻烦还不如写个脚本来的经济实惠。#-*-coding:utf-8-*-fromredisimportStrictRedis"""redis是用于操作Redis的第三方库,StrictRedis是官方推荐的方法，而且Redis是它的子类，Redis能做到的StrictRedi
系统 2019-09-27 17:46:53 1829
forsplitValueinset(dataset[:,featureIndex].tolist()):首先set是一个无序，无重复的数据结构，所以很多时候使用它来进行去重；但是set接收的函数是原生array，这个怎么办？我现在有的numpy里面的matrix；于是我查了一下，直接使用matrix.tolist()，但是发现返回值有问题：importosos.chdir("D:\\galaxy\\aliyunsvn\\code\\MLInAction\
系统 2019-09-27 17:46:43 1829
django使用app机制来实现组件的重用，充分的利用已有的app可以极大的简化开发工作。目前django下的app虽然还不够丰富，却也还是有部分不错的。django-tagging就是一个不错的app。现在tag的应用非常广泛，tag基本上成了各网站的必备项目之一，django-tagging就是一个提供tag功能的app。django-tagging提供的功能非常丰富，使用起来却十分简单。下面我就介绍一些常用的用法，让大家对该app有个基本的了解，更详
系统 2019-09-27 17:46:09 1829
美空网数据----简介从今天开始，我们尝试用2篇博客的内容量，搞定一个网站叫做“美空网”网址为：http://www.moko.cc/，这个网站我分析了一下，我们要爬取的图片在下面这个网址http://www.moko.cc/post/1302075.html然后在去分析一下，我需要找到一个图片列表页面是最好的，作为一个勤劳的爬虫coder，我找到了这个页面http://www.moko.cc/post/da39db43246047c79dcaef44c2
系统 2019-09-27 17:45:41 1829
保证只能运行一个脚本实例，方法是程序运行时监听一个特定端口，如果失败则说明已经有实例在跑。使用装饰器实现，便于重用复制代码代码如下:importfunctoolsdefjust_one_instance(func):'''装饰器如果已经有实例在跑则退出复制代码代码如下::return:'''@functools.wraps(func)deff(*args,**kwargs):importsockettry:#全局属性，否则变量会在方法退出后被销毁globa
系统 2019-09-27 17:45:27 1829
