python3.6threading和multiprocessing四核+三星250G-850-SSD自从用多进程和多线程进行编程，一致没搞懂到底谁更快。网上很多都说python多进程更快，因为GIL(全局解释器锁)。但是我在写代码的时候，测试时间却是多线程更快，所以这到底是怎么回事？最近再做分词工作，原来的代码速度太慢，想提速，所以来探求一下有效方法(文末有代码和效果图)这里先来一张程序的结果图，说明线程和进程谁更快一些定义并行是指两个或者多个事件在同一
系统 2019-09-27 17:54:48 2369
最近在工作中遇到了嵌套多层的json串，不仅包括类似于python字典的嵌套，里面还有数组的嵌套。具体的例子如下，在这里列举了三个例子，其实处理了大约500万条，虽然嵌套也挺多，但相对于专业的爬虫工程师来说，这肯定是小意思而已。这个json串的意思是一个企业所对应的规则，前面是企业的id（因为保密，所以企业id肯定更改了），因为本人是在滴滴，所以对应的规则当然是用车规则了，还是因为保密，所以规则的具体内容也不介绍了，只需要知道json串中的一个键值对对应一
系统 2019-09-27 17:52:16 2369
写的dht协议搜索的程序，这几天优化了一下发现速度确实快了好多。但是出现了一个新的问题，内存直接飙升，我开了十个爬虫占用内存800m。开始我以为是节点太多了，找了几个小问题修改一下，发现没用。后来就到网上查找python内存分析的工具，查了一点资料发现python有个meliae库操作非常方便，就使用分析了一下，发现不是节点太多的原因00,是保存发送的t_id，用来标示返回的消息是那个发出的一个字典过大了。从分析的结果非常容易的定位了某个对象的数量和大小，
系统 2019-09-27 17:52:11 2369
针对本题，大部分题解是使用的深度优先算法实现的，本文提供了广度优先的解决方案。1、深度优先classSolution:deffindCircleNum(self,M):visited,ans=set(),0defdfs(i):forjinrange(len(M[i])):ifM[i][j]andjnotinvisited:visited.add(j)dfs(j)foriinrange(len(M)):ifinotinvisited:dfs(i)ans+=
系统 2019-09-27 17:51:52 2369
HTMLParser是python用来解析html的模块。它可以分析出html里面的标签、数据等等，是一种处理html的简便途径。HTMLParser采用的是一种事件驱动的模式，当HTMLParser找到一个特定的标记时，它会去调用一个用户定义的函数，以此来通知程序处理。它主要的用户回调函数的命名都是以handler_开头的，都是HTMLParser的成员函数。当我们使用时，就从HTMLParser派生出新的类，然后重新定义这几个以handler_开头的函
系统 2019-09-27 17:50:28 2369
for循环本系列前面“探索Python，第5部分：用Python编程”一文讨论了if语句和while循环，讨论了复合语句以及适当缩进Python语句来指示相关Python代码块。该文的结尾介绍了Pythonfor循环。但就其使用和功能来说，for循环更值得关注，所以本文单独讲述该循环。for循环有一个简单的语法，使您可以从容器对象中提取单个项目并对其进行某些操作。简单地说，使用for循环，可以迭代中对象集合的项目。对象集合可以是任何Python容器类型，包
系统 2019-09-27 17:49:45 2369
首先，要明白encode()和decode()的区别encode()的作用是将Unicode编码的字符串转换为其他编码格式。例如：st1.encode("utf-8")这句话的作用是将Unicode编码的st1编码为utf-8编码的字符串decode()的作用是把其他编码格式的字符串转换成Unicode编码的字符串。例如：st2.decode("utf-8")这句话的作用是将utf-8编码的字符串st2解码为Unicode编码的字符串第二，除Unicode
系统 2019-09-27 17:48:16 2369
下面给大家介绍下Python正则表达式匹配日期与时间#!/usr/bin/envpython#-*-coding:utf-8-*-__author__='Randy'importrefromdatetimeimportdatetimetest_date='他的生日是2016-12-1214:34,是个可爱的小宝贝.二宝的生日是2016-12-2111:34,好可爱的.'test_datetime='他的生日是2016-12-1214:34,是个可爱的小宝贝
系统 2019-09-27 17:46:34 2369
本文实例讲述了Python中dictionaryitems()系列函数的用法，对Python程序设计有很好的参考借鉴价值。具体分析如下：先来看一个示例：importhtml#availableonlyinPython3.xdefmake_elements(name,value,**attrs):keyvals=['%s="%s"'%itemforiteminattrs.items()]attr_str=''.join(keyvals)element='<{
系统 2019-09-27 17:46:31 2369
调试程序的时候，就吃过这个亏，不知道为何Python使用括号做元组声明边界符，估计是找不到合适的符号了。中括号用来声明列表，花括号用来声明字典，元组号只能用括号来声明了。有其他语言编程经历的朋友都清楚括号在其它语言里都是表示优先级，而Python也可以用来表示优先级，所以也就引发了以下白痴的问题。复制代码代码如下:#encoding=UTF-8obj=('tuple')printobjprinttype(obj)printlen(obj)执行结果复制代码代
系统 2019-09-27 17:46:11 2369
