上一关，我们学习了Scrapy框架，知道了Scrapy爬虫公司的结构和工作原理。在Scrapy爬虫公司里，引擎是最大的boss，统领着调度器、下载器、爬虫和数据管道四大部门。这四大部门都听命于引擎，视引擎的需求为最高需求。我们还通过实操爬取豆瓣Top250图书的项目，熟悉了Scrapy的用法。这一关，我会带你实操一个更大的项目——用Scrapy爬取招聘网站的招聘信息。你可以借此体验一把当Scrapy爬虫公司CEO的感觉，用代码控制并操作整个Scrapy的运
系统 2019-09-27 17:56:18 2446
天在刷题的时候用到了正则，用的过程中就感觉有点不太熟练了，很久没有用正则都有点忘了。所以现在呢，我们就一起来review一下python中正则模块re的用法吧。今天是review，所以一些基础的概念就不做介绍了，先来看正则中的修饰符以及它的功能：修饰符•re.I使匹配对大小写不敏感•re.L做本地化识别匹配•re.M多行匹配,影响^和$•re.S使.匹配包括换行在内的所有字符•re.U根据Unicode字符集解析字符.这个标志影响\w\W\b\B•re.X
系统 2019-09-27 17:55:26 2446
list_pratisce=[45,69,8,19,9]n=len(list_pratisce)forjinrange(n):foriinrange(n-1):iflist_pratisce[i]>list_pratisce[i+1]:temp=list_pratisce[i]list_pratisce[i]=list_pratisce[i+1]list_pratisce[i+1]=tempprint(list_pratisce)输出结果：[8,9,19,
系统 2019-09-27 17:53:56 2446
Python基本数据类型数字类型整数类型可正可负，取值范围不限；四种进制（二进制0b、八进制0o、十进制0d、十六进制0x）；浮点数类型取值范围存在限制，常规计算可忽略，取值范围数量级-10^307~10^308,精度数量级10^-16；运算时存在不确定尾数，不是bug,可用round()函数，截取尾数位数；科学技术法e表示a*10^b，例如:5e3==5x10^3,5e-3==5x10^-3；复数类型如果x^2=-1,那么x的值是什么？定义j=,以此为基
系统 2019-09-27 17:53:28 2446
声明：代码的运行环境为Python3。Python3与Python2在一些细节上会有所不同，希望广大读者注意。本博客以代码为主，代码中会有详细的注释。相关文章将会发布在我的个人博客专栏《Python从入门到深度学习》，欢迎大家关注~K-Means算法、K-Means++算法以及MeanShift算法都是基于距离的聚类算法，一般此类聚类的聚类结果都是球状的簇，但当聚类结果是非球状的时候，基于距离聚类的聚类算法得到的聚类结果并不是那么的好，然而，基于密度的聚类
系统 2019-09-27 17:52:43 2446
pandas主要有三个用来删除的函数，.drop()、.drop_duplicates()、.dropna()。总结如下.drop()删除行、列.drop_duplicates()删除重复数据.dropna()删除空值（所在行、列）为避免篇幅太长，将其分为两部分，不想看参数介绍的可以直接看实例。本篇介绍.drop()官方介绍：https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.
系统 2019-09-27 17:49:49 2446
一、说明本期培训主要是面向想通过python来提高SEO工作效率的SEOer或者是对python爬虫感兴趣的目标人群。主要内容是学习如何通过python来开发各种SEO工具，以及python爬虫的开发。采用最新的python3版本，课程从零基础开始讲起，因此对于python方面完全零基础的小白也是适用的。本期课程用到的操作系统有win7、win10、MacOS、centos等，主要是为了适应适用不同操作系统的学员。课程主要是在MacOS上面讲解，但是对于其
系统 2019-09-27 17:49:00 2446
关于基础项目打算招聘一个自动化运维，主要需求是python、Linux与shell脚本能力。但面试几天发现一些问题：简历虚假这个不管哪行，简历含水量大都是普遍存在的，看简历犀利的一比，一面是能力弱的一腿。谁都希望自己80分的能力写成120，但有时候假的有些离谱，问一两个问题就漏气了…年龄与薪酬目前的IT行业，最敢坐地起薪的就是27–33这年龄段的，低于范围的往往因为能力或者说跳槽经验少，而不敢要高价，高于这个年龄的感觉失去了针对年轻人的干劲与学习能力，所以
系统 2019-09-27 17:45:58 2446
优先队列的二叉堆实现在前面的章节里我们学习了“先进先出”（FIFO）的数据结构：队列（Queue）。队列有一种变体叫做“优先队列”（PriorityQueue）。优先队列的出队（Dequeue）操作和队列一样，都是从队首出队。但在优先队列的内部，元素的次序却是由“优先级”来决定：高优先级的元素排在队首，而低优先级的元素则排在后面。这样，优先队列的入队（Enqueue）操作就比较复杂，需要将元素根据优先级尽量排到队列前面。我们将会发现，对于下一节要学的图算法
系统 2019-09-27 17:38:24 2446
如题，解决Python中用PyQt时中文乱码问题的解决方法：在中文字符串前面加上u，如u'你好，世界'，其他网上的方法没有多去探究，Python的版本也会影响解决方法，故这里只推荐这种。（有人说用toLocal8bit函数也可以，我试了下，貌似不行）请看例子：#coding=utf-8fromPyQt4importQtGui,QtCores=QtCore.QString(u'你好(hello)世界(world)')t=s.toLocal8Bit()u=un
系统 2019-09-27 17:49:04 2445
参考链接：Bilibili相簿下载(BilibiliAlbumDownload)下载Bilibili相簿目录1.接口展示2.代码转载3.代码详细注释4.总结一、接口展示↶api1:https://api.vc.bilibili.com/link_draw/v1/doc/upload_count?uid=+uid号api2:https://api.vc.bilibili.com/link_draw/v1/doc/doc_list?page_size=30&b
系统 2019-09-27 17:48:12 2445
seed()设置生成随机数用的整数起始值。调用任何其他random模块函数之前调用这个函数。语法以下是seed()方法的语法：seed([x])注意：此函数是无法直接访问的，所以需要导入seed模块，然后需要使用random静态对象来调用这个函数。参数x--这是下一个随机数的种子。如果省略，则需要系统时间，以产生下一个随机数。返回值此方法不返回任何值。例子下面的例子显示了seed()方法的使用。#!/usr/bin/pythonimportrandomra
系统 2019-09-27 17:47:34 2445
本文实例为大家分享了python根据多个文件名批量查找文件的具体代码，供大家参考，具体内容如下老板给了我一个文件列表，让我在一堆文件中挑出来，他要的文件有500多个，一堆文件有上千个，而且给的是关键词，不是完整的文件名。我先做了类似的文件测试一下，一个名为filename的excel表又做了一个文件夹接下来运行代码importosimportnumpyasnpimportpandasaspdimportshutilfile_path='/home/disk
系统 2019-09-27 17:45:26 2445
Python笔记002-列表推导式以下是我学习《流畅的Python》后的个人笔记，现在拿出来和大家共享，希望能帮到各位Python学习者。首次发表于:微信公众号：科技老丁哥，ID:TechDing，敬请关注。本篇主要知识点：列表推导式可以从一个序列快速构建另一个序列，非常方便快捷，强烈建议使用。列表推导式适用于简单的for循环，可以对一个列表中的每个元素进行相同操作，也可以挑选出原列表中满足一定条件的元素组成新的列表。集合推导式应用比较少，而字典推导式却应
系统 2019-09-27 17:56:35 2444
针对很普遍的每个元素的操作会遍历每个元素进行操作。这里给出了几种写法，列表每个元素自增等数学操作同理；示例：整形列表ilist加1个数、元素类型转字符串：ilist=[1,2,3,10,11,12]#每个元素加5，四种方法fori,vinenumerate(ilist):ilist[i]=v+5[x+5forxinilist]map(lambdax:x+5,ilist)#仅python2list(map(lambdax:x+5,ilist))[*map(l
系统 2019-09-27 17:52:46 2444
