要爬取的网站不需要登陆，没有反爬机制，操作很简单首先安装需要的程序包pipinstallrequestspipinstallbeautifulsoup4pipinstallxlwt具体的实现类GetInfo.py#信息实体类classproduct_info(object):serios=''#存放商品系列productActualPrice=''#存放商品成交价productOldPrice=''#存放商品面价detailString=''#存放商品详情
系统 2019-09-27 17:47:27 1690
分析分析网站寻找需要的网址用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图：在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图：圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1，出于学习目的只爬取第一页（减少服务器压力）。然后把网址放到浏览器中测试是否可以访问。如图：结果正常。分析json数据，提取图片链接最后分析发现
系统 2019-09-27 17:46:57 1690
Python程序可以处理多种方式的日期和时间。日期格式之间的转换是一种常见计算机的杂活。Python的时间和日历模块，能帮助处理日期和时间。Tick是什么?时间间隔为浮点数以秒为单位的数字。在特定的时间瞬间自上午12时00分，1970年1月1日(纪元)表示，单位为秒。Python中可用的流行时间模块，它提供功能转换。该功能time.time()返回当前系统时间，因为上午12点，1970年1月1日(时代)。例子:#!/usr/bin/pythonimport
系统 2019-09-27 17:46:45 1690
通俗的来说，Python中所谓的命名空间可以理解为一个容器。在这个容器中可以装许多标识符。不同容器中的同名的标识符是不会相互冲突的。理解python的命名空间需要掌握三条规则：第一，赋值（包括显式赋值和隐式赋值）产生标识符，赋值的地点决定标识符所处的命名空间。第二，函数定义（包括def和lambda）产生新的命名空间。第三，python搜索一个标识符的顺序是"LEGB"。所谓的"LEGB"是python中四层命名空间的英文名字首字母的缩写。最里面的一层是L
系统 2019-09-27 17:46:43 1690
内置函数：Built-inFunctionsabs()all()any()ascii()bin()1.abs(x)返回x的绝对值。参数可以是整数或浮点数。如果参数是复数，则返回其大小。importmathprint('abs(45)的值:',abs(45))print('abs(-45)的值:',abs(-45))print('abs(45+23)的值:',abs(45+23))print('abs(math.pi)的值:',abs(math.pi))输出
系统 2019-09-27 17:46:09 1690
电脑和树莓派在同一局域网内，先在电脑和树莓派创建python运行环境，然后在树莓派中用python运行rpi.py；在电脑上运行computer.py；电脑上输入字符即可在树莓派上即时显示！rpi.py#coding:utf-8#importnecessarypackageimportsocketimporttimeimportsysHOST_IP="192.168.31.151"#树莓派的IP地址HOST_PORT=8888print("Starting
系统 2019-09-27 17:45:46 1690
装饰器：概念：把一个函数当作参数传递给一个函数，返回一个替代版的函数本质上就是一个返回函数的函数“在不改变原函数的基础上，给函数增加功能”@符号，那只是一个简短的方式来生成一个被装饰的函数defpaint(func):参数是一个函数definner():print('#########')这个的整个部分就都是装饰器func()returninner@paint这个就是函数戴帽子，也就是装饰器deffunc():print('haveaniceday!!')
系统 2019-09-27 17:45:41 1690
1.文件的读取和显示方法1：复制代码代码如下:f=open(r'G:\2.txt')printf.read()f.close()方法2：复制代码代码如下:try:t=open(r'G:\2.txt')printt.read()finally:ift:t.close()方法3：复制代码代码如下:withopen(r'g:\2.txt')asg:forlineing:printlinepython虽然每次打开文件都要关闭，但是可能会由于异常导致未关闭，因此我们
系统 2019-09-27 17:45:38 1690
今天在写爬虫程序的时候由于要翻页，做除法分页的时候出现了复制代码代码如下:totalCount='100'totalPage=int(totalCount)/20ValueError:invalidliteralforint()withbase10的错误网上同样的错误有人建议用round(float(“1.0″))，但是解决不了我这个问题，round(float(“1.0″))是用于解决浮点数转换为整形数的，而我这个则是因为原字符串转换为整形后做除法，虽然
系统 2019-09-27 17:45:38 1690
最近不少人在微信问我现在Python还好就业不好就业？发展前景怎么样？我30多岁了，还能不能转行编程？Python该怎么学？如果做Python到底该做爬虫还是数据分析还是web？......等等这样的问题，现在逐一谈下我的看法，进而引申出目前如果做python，最好要掌握的一些技能以及我个人认为的很稳的发展路线，这里分析的观点会以大部分普通开发者的角度来看待，对一些技术牛人可能就不太适用了。1、Python好就业吗？其实，对于这些问题，我是不太想回答的，可
系统 2019-09-27 17:45:29 1690
