抓取猫眼电影上面Top100榜单,抓取的内容有电影名称,主演,上映时间,图片,得分等信息。抓取的内容以文件形式保存,地址为https://maoyan.com/board/41.分析该榜单页面如下拉到底部点击下一页,发现此时的URL变化了。此时的URL变为https://maoyan.com/board/4?offset=10,比之前的URL多了参数offset=10,再点击下一页的URL为https://maoyan.com/board/4?offset
系统 2019-09-27 17:56:34 2262
折腾一上午,走了弯路,故总结一下。----------------------------------------------以下是有问题的--------------最下面有正确方式------------------------------------------jupyter有terminal,这个terminal其实就是linux环境,所以按照linux下python2.7升级python3操作就行。但愚蠢的我,找的参考文档(更换JupyterNo
系统 2019-09-27 17:55:36 2262
类:理解类最简单的方式:类是一个函数包,类中可以放置变量和函数,然后类中的函数可以很方便的调用变量。使用class来定义一个类#语法:创建一个名为“ClassName”的类,类名一般首字母要大写,():不能丢classClassName():#如定义一个名为'狗'的类,可以写成classDog():#规范:class语句后续的代码块要缩进deffunction1():#定义类中的函数1在类中被定义的函数被称为类的【方法】,描述的是这个类能做什么。我们使用类
系统 2019-09-27 17:55:24 2262
以下几种方法来模拟enum:(感觉方法一简单实用)复制代码代码如下:#way1classDirections:up=0down=1left=2right=3printDirections.down#way2dirUp,dirDown,dirLeft,dirRight=range(4)printdirDown#way3importcollectionsdircoll=collections.namedtuple('directions',('UP','DOW
系统 2019-09-27 17:54:03 2262
1.运行程序时,报以下错误:HTTPSConnectionPool(host='test.xxxx.com',port=443):Maxretriesexceededwithurl:/openapi/smartStock/000008.SZ.shtml(CausedbySSLError(SSLError(1,'[SSL:CERTIFICATE_VERIFY_FAILED]certificateverifyfailed(_ssl.c:600)'),))解决方
系统 2019-09-27 17:53:34 2262
情景是这样的:在C#中调用python脚本进行post请求,python脚本中使用了requests包。Python的开发环境我们有比较多的选择,pycharm、sublimetext等等。但是作为.net平台的Python语言ironPython,可以和C#交互,让编程更活泛。ironPython本身其实就是一个python的开发环境,我的电脑上还装有python2.7和pycharm,开始的时候使用pycharm写的,本来的想法是用VS直接调用就可以了
系统 2019-09-27 17:53:18 2262
1.Python多线程爬虫在批量去爬取数据的时候,往往效率会很低,这个时候我们可以用到多线程的技术。python是支持多线程的,主要是通过thread和threading这两个模块来实现的。单线程爬虫效率相对来说会低很多,例如:importrequestsfrombs4importBeautifulSoupimporttimestart_time=time.time()defmain():headers={'User-Agent':'Mozilla/5.0
系统 2019-09-27 17:51:48 2262
这样就将你所有微信好友的信息都返回了,我们并不需要这么多的信息,我们选取一些信息存储到csv文件中注意:返回的信息是一个list,其中第一个是我自己的信息,所以要从第二项开始存储的文件2:女性,1:男性,0:其他接下来,我们分析csv文件中的数据首先我们看看微信好友性别的分布:我这里是用的Echarts图表,偷了一个小懒我的微信里还是男性占比多,比较正常接下来分析微信好友的位置Echarts展示这个柱状图很直观的向我们展示了微信朋友的分布。这篇文章只是用到
系统 2019-09-27 17:50:46 2262
描述给定一个序列(至少含有1个数),从该序列中寻找一个连续的子序列,使得子序列的和最大。例如,给定序列[-2,1,-3,4,-1,2,1,-5,4],连续子序列[4,-1,2,1]的和最大,为6。我v1.0classSolution:defmaxSubArray(self,nums):""":typenums:List[int]:rtype:int"""l=len(nums)i=0result=nums[0]whilei
系统 2019-09-27 17:48:07 2262
在我们过去的几篇博客中,说到了Numpy的使用,我们可以生成一些数据了,下面我们来看看怎么让这些数据呈现在图画上,让我们更加直观的来分析数据。安装过程我就不再说了,不会安装的,回去补补python最最基础的知识。我们可以看到我们生成了一组X,而且我们设置了y=2x+5,也就是我们初中学的一元一次方程。plt.title("Matplotlibdemo")设置了图形(坐标)的名字plt.xlabel("xaxiscaption")设置了X轴的名字plt.yl
系统 2019-09-27 17:46:47 2262