Python

Python爬虫实现的根据分类爬取豆瓣电影信息功能示例

本文实例讲述了Python爬虫实现的根据分类爬取豆瓣电影信息功能。分享给大家供大家参考,具体如下:代码的入口:if__name__=='__main__':main()#!/usr/bin/python3#-*-coding:utf-8-*-#author:Sirius.Zhaoimportjsonfromurllib.parseimportquotefromurllib.requestimporturlopenfromurllib.requestimpo

系统 2019-09-27 17:56:14 2163

Python

Python 生成器 generator初步认识

生成器在Python中,使用了yield的函数被称为生成器(generator)。生成器是一个返回迭代器的函数,只能用于迭代操作,更简单点理解生成器就是一个迭代器。在调用生成器运行的过程中,每次遇到yield时函数会暂停并保存当前所有的运行信息,返回yield的值,并在下一次执行next()方法时从当前位置继续运行。调用一个生成器函数,返回的是一个迭代器对象。列表推导式空间开销大占用内存耗时大,.生成器保存的是算法,而列表保存的计算后的内容,所以同样内容的

系统 2019-09-27 17:56:08 2163

Python

Python3.6+selenium2.53.6自动化测试_ddt数据驱动(二)

环境:编辑工具:浏览器:有问题可以联系qq:1776376537安装DDT一分析1导入DDT2类前引入ddt3分三次,作为三个字典把数据传过来二代码#导入包fromseleniumimportwebdriverimportunittestfrompages.login_pageimportLoginPage,lgoing_urlfromcommon.baseimportBaseimportddt'''先思考下手工操作顺序(主要流程)第1个用例:输入admi

系统 2019-09-27 17:54:12 2163

Python

python获取函数名类名

参考链接:1.在类内部获取类名和方法名代码:importsysclasstestsqawd(object):defhello(self):print('thenameofmethodis##{}##'.format(sys._getframe().f_code.co_name))print('thenameofclassis##{}##'.format(self.__class__.__name__))if__name__=='__main__':ttt=

系统 2019-09-27 17:54:00 2163

Python

Python面向对象编程——什么是面向对象的程序设计

Python面向对象编程——什么是面向对象的程序设计一、面向过程的程序设计1、概念核心是“过程”二字,“过程”指的是解决问题的步骤,即先干什么再干什么......基于面向过程设计程序就好比在设计一条流水线,是一种机械式的思维方式。若程序一开始是要着手解决一个大的问题,面向过程的基本设计思路就是把这个大的问题分解成很多个小问题或子过程,这些子过程在执行的过程中继续分解,直到小问题足够简单到可以在一小步骤范围内解决。2、优点复杂的问题流程化,进而简单化(一个复

系统 2019-09-27 17:53:59 2163

Python

python字符串替换的2种方法

python字符串替换可以用2种方法实现:1是用字符串本身的方法。2用正则来替换字符串下面用个例子来实验下:a=‘helloword’把a字符串里的word替换为python1、用字符串本身的replace方法1a.replace(‘word’,‘python’)输出的结果是hellopython2、用正则表达式来完成替换1importre2strinfo=re.compile(‘word’)3b=strinfo.sub(‘python’,a)4print

系统 2019-09-27 17:53:40 2163

Python

Python的文件读写基本操作

May19,20192:08PM文件的读写,由内置模块open进行操作和实现文本文件读操作withopen('data.txt')asfile_read:txt=file_read.read()print(txt.strip())文本文件的追加#文件的追加withopen('data.txt','a')asfile_append:file_append.write('\nNicetomeetyou!')文件的重写#文件的重写withopen('data.t

系统 2019-09-27 17:53:40 2163

Python

Python reduce()函数的用法小结

reduce()函数也是Python内置的一个高阶函数。reduce()格式:reduce(func,seq[,init()])reduce()函数即为化简函数,它的执行过程为:每一次迭代,都将上一次的迭代结果(注:第一次为init元素,如果没有指定init则为seq的第一个元素)与下一个元素一同传入二元func函数中去执行。在reduce()函数中,init是可选的,如果指定,则作为第一次迭代的第一个元素使用,如果没有指定,就取seq中的第一个元素。re

系统 2019-09-27 17:53:19 2163

Python

python学习笔记之内置函数

#reversed()#l=[1,2,3,4,5]#l.reverse()#print(l)#l=[1,2,3,4,5]#l2=reversed(l)#print(l2)#保留原列表,返回一个反向的迭代器#l=(1,2,23,213,5612,342,43)#sli=slice(1,5,2)#print(l[sli])#print(l[1:5:2])#print(format('test','<20'))#print(format('test','>40'

系统 2019-09-27 17:49:17 2163

Python

python连接hive批量补充时间分区特征

1.python连接数据库frompyhiveimporthiveconn=hive.Connection(host='xxxxxx',port=xxx,auth='CUSTOM',username='yourusername',password='yourpassword',database='default')cursor=conn.cursor()2.SQL代码封装设计为可传参方式defget_sql(d):d="'"+d+"'"add_sql_ho

系统 2019-09-27 17:49:01 2163

Python

python:按行读入,排序然后输出的方法

题目描述给定n个字符串,请对n个字符串按照字典序排列。输入描述:输入第一行为一个正整数n(1≤n≤1000),下面n行为n个字符串(字符串长度≤100),字符串中只含有大小写字母。输出描述:数据输出n行,输出结果为按照字典序排列的字符串。示例1输入9captocatcardtwotooupboatboot输出boatbootcapcardcattotootwouppython3代码实现为:n=int(input())word=[]foriinrange(n

系统 2019-09-27 17:48:16 2163

Python

为什么人工智能需要用python

上一篇已经说过,python随着人工智能的兴起而大热。这里我将详细解释为什么人工智能需要用python。相对于其他语言,python对人工智能最大的优势是他的可扩展性、可嵌入性。这也是他被程序员称为“胶水语言”的原因。python对人工智能应用的优点:1:人工智能的核心算法是完全依赖于C/C++的,而且Python历史上也一直都是科学计算和数据分析的重要工具。Python虽然是脚本语言,但是因为容易学,迅速成为科学家的工具(MATLAB等也能搞科学计算,但

系统 2019-09-27 17:46:24 2163

Python

Ubuntu 16.04 搭建 Python开发环境“大乱斗”

最近由于需要用Python完成一项作业,于是在ubuntu16.04系统上倒腾了一下Python的开发环境,整个过程也是一波三折。现总结一下经验,以免再掉到坑里。1.ubuntu16.04自带的Python版本ubuntu16.04系统默认安装了Python2.7.12和Python3.5.2版本,路径分别为/usr/bin/python2.7和/usr/bin/python3.5。可以在终端输入python,然后连按两次TAB键,就会显示自己电脑上装了哪

系统 2019-09-27 17:46:07 2163

Python

python编码最佳实践之总结

相信用python的同学不少,本人也一直对python情有独钟,毫无疑问python作为一门解释性动态语言没有那些编译型语言高效,但是python简洁、易读以及可扩展性等特性使得它大受青睐。工作中很多同事都在用python,但往往很少有人关注它的性能和惯用法,一般都是现学现用,毕竟python不是我们的主要语言,我们一般只是使用它来做一些系统管理的工作。但是我们为什么不做的更好呢?pythonzen中有这样一句:Thereshouldbeone--andp

系统 2019-09-27 17:38:16 2163

Python

Python:给定样本的排列组合,使用itertools

importitertools'''#product笛卡尔积(有放回的抽样排列)foriinitertools.product('ABCD',repeat=2):print(i)''''''#permutations排列(不放回抽样排列)foriinitertools.permutations('ABCD',2):print(i)''''''#combinations组合,没有重复(不返回抽样组合)foriinitertools.combinations(

系统 2019-09-27 17:57:07 2162