python3.6threading和multiprocessing四核+三星250G-850-SSD自从用多进程和多线程进行编程，一致没搞懂到底谁更快。网上很多都说python多进程更快，因为GIL(全局解释器锁)。但是我在写代码的时候，测试时间却是多线程更快，所以这到底是怎么回事？最近再做分词工作，原来的代码速度太慢，想提速，所以来探求一下有效方法(文末有代码和效果图)这里先来一张程序的结果图，说明线程和进程谁更快一些定义并行是指两个或者多个事件在同一
系统 2019-09-27 17:54:48 2368
整理一下配置的过程。mac自带python2.7，但是python3.6和python2.7在很多地方上还是有一些差别的，还是使用目前比较主流的3.6吧。官网下载python3.6https://www.python.org/downloads/mac-osx/选一个你喜欢的版本下载，我下的是3.6.8按照提示一步步安装就好，最终会出现：用IDLE写代码太boring了，我比较喜欢用Pycharm在终端Installpython3如果电脑里没有Homebr
系统 2019-09-27 17:54:32 2368
直接送上代码importurllib.requestimportjsonimportjsonpathimporttimeend_page=int(input('请输入爬取的结束页码:'))foriinrange(0,end_page+1):print('第%s页开始爬取------'%(i+1))url='https://sclub.jd.com/comment/productPageComments.action?callback=fetchJSON_c
系统 2019-09-27 17:54:08 2368
目录：1、%用法2、format用法一、%用法1、整数的格式化%o——oct八进制%d——dec十进制%x——hex十六进制例>>>print('%o'%20)24>>>print('%d'%20)20>>>print('%x'%20)142、浮点数的格式化%e——保留小数点后面六位有效数字，指数形式输出%.3e，保留3位小数位，使用科学计数法%f——保留小数点后面六位有效数字%.3f，保留3位小数位%g——在保证六位有效数字的前提下，使用小数方式，否则使
系统 2019-09-27 17:52:22 2368
写的dht协议搜索的程序，这几天优化了一下发现速度确实快了好多。但是出现了一个新的问题，内存直接飙升，我开了十个爬虫占用内存800m。开始我以为是节点太多了，找了几个小问题修改一下，发现没用。后来就到网上查找python内存分析的工具，查了一点资料发现python有个meliae库操作非常方便，就使用分析了一下，发现不是节点太多的原因00,是保存发送的t_id，用来标示返回的消息是那个发出的一个字典过大了。从分析的结果非常容易的定位了某个对象的数量和大小，
系统 2019-09-27 17:52:11 2368
for循环本系列前面“探索Python，第5部分：用Python编程”一文讨论了if语句和while循环，讨论了复合语句以及适当缩进Python语句来指示相关Python代码块。该文的结尾介绍了Pythonfor循环。但就其使用和功能来说，for循环更值得关注，所以本文单独讲述该循环。for循环有一个简单的语法，使您可以从容器对象中提取单个项目并对其进行某些操作。简单地说，使用for循环，可以迭代中对象集合的项目。对象集合可以是任何Python容器类型，包
系统 2019-09-27 17:49:45 2368
首先，要明白encode()和decode()的区别encode()的作用是将Unicode编码的字符串转换为其他编码格式。例如：st1.encode("utf-8")这句话的作用是将Unicode编码的st1编码为utf-8编码的字符串decode()的作用是把其他编码格式的字符串转换成Unicode编码的字符串。例如：st2.decode("utf-8")这句话的作用是将utf-8编码的字符串st2解码为Unicode编码的字符串第二，除Unicode
系统 2019-09-27 17:48:16 2368
本文实例讲述了Python中dictionaryitems()系列函数的用法，对Python程序设计有很好的参考借鉴价值。具体分析如下：先来看一个示例：importhtml#availableonlyinPython3.xdefmake_elements(name,value,**attrs):keyvals=['%s="%s"'%itemforiteminattrs.items()]attr_str=''.join(keyvals)element='<{
系统 2019-09-27 17:46:31 2368
刚刚在学习些测试报告的时候，出现一个路径的问题，找了很久的原因，竟然是少了一个反斜杠引起的，在此顺便记录一下正反斜杠的作用。在Python中，记录路径时有以下几种写法，如：（大家都知道\n是换行的意思）report_dir1=r‘C:\Local\Programs\Python\Python35\Lib\n_test'report_dir2=‘C:\\Local\\Programs\\Python\\Python35\\Lib\\n_test'report
系统 2019-09-27 17:46:07 2368
字符串分割，将一个字符串分裂成多个字符串组成的列表，可以理解为字符串转列表，经常会用到语法：str.split(sep,[,max]),sep可以指定切割的符号，max可以指定切割的次数（次数不常用）不带参数时以空格进行分割带参数时，以该参数进行分割未查询到分隔符时，列表只包含原始字符串source="1,2,3,4,5,,6"printsource.split(',')#按照索引取值[]source="1,2,3,4,5,,6"printsource.s
系统 2019-09-27 17:45:27 2368
