直接送上代码importurllib.requestimportjsonimportjsonpathimporttimeend_page=int(input('请输入爬取的结束页码:'))foriinrange(0,end_page+1):print('第%s页开始爬取------'%(i+1))url='https://sclub.jd.com/comment/productPageComments.action?callback=fetchJSON_c
系统 2019-09-27 17:54:08 2368
目录:1、%用法2、format用法一、%用法1、整数的格式化%o——oct八进制%d——dec十进制%x——hex十六进制例>>>print('%o'%20)24>>>print('%d'%20)20>>>print('%x'%20)142、浮点数的格式化%e——保留小数点后面六位有效数字,指数形式输出%.3e,保留3位小数位,使用科学计数法%f——保留小数点后面六位有效数字%.3f,保留3位小数位%g——在保证六位有效数字的前提下,使用小数方式,否则使
系统 2019-09-27 17:52:22 2368
写的dht协议搜索的程序,这几天优化了一下发现速度确实快了好多。但是出现了一个新的问题,内存直接飙升,我开了十个爬虫占用内存800m。开始我以为是节点太多了,找了几个小问题修改一下,发现没用。后来就到网上查找python内存分析的工具,查了一点资料发现python有个meliae库操作非常方便,就使用分析了一下,发现不是节点太多的原因00,是保存发送的t_id,用来标示返回的消息是那个发出的一个字典过大了。从分析的结果非常容易的定位了某个对象的数量和大小,
系统 2019-09-27 17:52:11 2368
for循环本系列前面“探索Python,第5部分:用Python编程”一文讨论了if语句和while循环,讨论了复合语句以及适当缩进Python语句来指示相关Python代码块。该文的结尾介绍了Pythonfor循环。但就其使用和功能来说,for循环更值得关注,所以本文单独讲述该循环。for循环有一个简单的语法,使您可以从容器对象中提取单个项目并对其进行某些操作。简单地说,使用for循环,可以迭代中对象集合的项目。对象集合可以是任何Python容器类型,包
系统 2019-09-27 17:49:45 2368
首先,要明白encode()和decode()的区别encode()的作用是将Unicode编码的字符串转换为其他编码格式。例如:st1.encode("utf-8")这句话的作用是将Unicode编码的st1编码为utf-8编码的字符串decode()的作用是把其他编码格式的字符串转换成Unicode编码的字符串。例如:st2.decode("utf-8")这句话的作用是将utf-8编码的字符串st2解码为Unicode编码的字符串第二,除Unicode
系统 2019-09-27 17:48:16 2368
本文实例讲述了Python中dictionaryitems()系列函数的用法,对Python程序设计有很好的参考借鉴价值。具体分析如下:先来看一个示例:importhtml#availableonlyinPython3.xdefmake_elements(name,value,**attrs):keyvals=['%s="%s"'%itemforiteminattrs.items()]attr_str=''.join(keyvals)element='<{
系统 2019-09-27 17:46:31 2368
调试程序的时候,就吃过这个亏,不知道为何Python使用括号做元组声明边界符,估计是找不到合适的符号了。中括号用来声明列表,花括号用来声明字典,元组号只能用括号来声明了。有其他语言编程经历的朋友都清楚括号在其它语言里都是表示优先级,而Python也可以用来表示优先级,所以也就引发了以下白痴的问题。复制代码代码如下:#encoding=UTF-8obj=('tuple')printobjprinttype(obj)printlen(obj)执行结果复制代码代
系统 2019-09-27 17:46:11 2368
刚刚在学习些测试报告的时候,出现一个路径的问题,找了很久的原因,竟然是少了一个反斜杠引起的,在此顺便记录一下正反斜杠的作用。在Python中,记录路径时有以下几种写法,如:(大家都知道\n是换行的意思)report_dir1=r‘C:\Local\Programs\Python\Python35\Lib\n_test'report_dir2=‘C:\\Local\\Programs\\Python\\Python35\\Lib\\n_test'report
系统 2019-09-27 17:46:07 2368
字符串分割,将一个字符串分裂成多个字符串组成的列表,可以理解为字符串转列表,经常会用到语法:str.split(sep,[,max]),sep可以指定切割的符号,max可以指定切割的次数(次数不常用)不带参数时以空格进行分割带参数时,以该参数进行分割未查询到分隔符时,列表只包含原始字符串source="1,2,3,4,5,,6"printsource.split(',')#按照索引取值[]source="1,2,3,4,5,,6"printsource.s
系统 2019-09-27 17:45:27 2368
分享一个基于tkinter的菜单程序添加操作,希望对需要的朋友有帮助。打开python集成开发环境,使用fromtkinterimportTkfromtkinterimportMenu导入Tk和Menu,最好不要用fromtkinterimport*因为这样可能刀座某些平台不兼容,比如树莓派就需要单个导入。使用root=Tk()新建一个Tk对象并赋值给root,然后再通过testMenu=Menu(root)新建一个菜单对象,并且和root关联。使用tes
系统 2019-09-27 17:37:49 2368