搜索到与相关的文章
Python

python爬虫(4)——scrapy框架

安装urllib库更适合写爬虫文件,scrapy更适合做爬虫项目。步骤:先更改pip源,国外的太慢了,参考:https://www.jb51.net/article/159167.htm升级pip:python-mpipinstall--upgradepippipinstallwheelpipinstalllxmlpipinstallTwistedpipinstallscrapy常用命令核心目录新建项目:scrapystartprojectmcq运行独立的

系统 2019-09-27 17:55:57 2248

Python

Python中MYSQLdb出现乱码的解决方法

本文实例讲述了Python中MYSQLdb出现乱码的解决方法,分享给大家供大家参考。具体方法如下:一般来说,在使用mysql最麻烦的问题在于乱码。查看mysql的编码:命令:复制代码代码如下:showvariableslike'character_set_%';可以看到如下结果:character_set_client为客户端编码方式;character_set_connection为建立连接使用的编码;character_set_database数据库的

系统 2019-09-27 17:55:26 2248

Python

第11.15节 Python正则表达式转义符定义的特殊序列

一、引言在前面《第11.13节Python正则表达式的转义符”\”功能介绍》介绍了正则表达式转义符'\',只不过当时作为转义符主要是用于在正则表达式中表示元字符自身的需要进行的转义。实际上,除了元字符使用转义符外,Python还支持由'\'和一个ASCII数字或ASCII字母字符组成的特殊序列,这些特殊代表特殊的含义。如果'\'后面跟的字符不是ASCII数字或者ASCII字母,那么正则样式将直接匹配后面跟的字符,如’\$’匹配字符‘$’。二、特殊序列\nu

系统 2019-09-27 17:53:29 2248

Python

01-Python读取Excel文档数据

Python对于自动化办公而言,具有很高的实用价值,它能处理重复性较强的工作,类似于合并表格,统计多个表格中的内容,等等。本文是Python之Excel文档处理系列的第一节:Excel内容读取。分以下几个步骤:1.弄清Excel的结构:Excel分为工作簿--工作表--单元格三个部分2.安装xlrd模块命令行安装:pipinstallxlrdPyCharm安装:找到File|Settings|Project:myCode|ProjectInterprete

系统 2019-09-27 17:53:19 2248

Python

Python小程序(8)假设有一组非负整数,对数据元素重新排列,使其构成的整数

假设有一组非负整数,对数据元素重新排列,使其构成的整数最大,输出该整数。如输入11,20,3,7.输出732011思路:1.用冒泡排序法对数据进行排序,将最小的元素放在最后2.最后对a数组各元素相加,输出字符串3.程序可以正确运行c=input("请输入一组数字,用空格隔开:")a=c.split()defcompare(a,b):s1=str(a)+str(b)s2=str(b)+str(a)ifs1

系统 2019-09-27 17:52:03 2248

Python

python tushare mpf 绘股票k线图

在Python3环境下使用Python2代码时,碰到了如下的语句:#importmatplotlib.financeasmpf需要安装pipinstallmpl_finance,然后用下面的语句取代。importmpl_financeasmpfmpf_kline.py#coding:utf-8importos,sysimportdatetimeimportmatplotlib.pyplotaspltfrommatplotlib.pylabimportdat

系统 2019-09-27 17:50:12 2248

Python

python Kmeans算法原理深入解析

一.概述首先需要先介绍一下无监督学习,所谓无监督学习,就是训练样本中的标记信息是位置的,目标是通过对无标记训练样本的学习来揭示数据的内在性质以及规律。通俗得说,就是根据数据的一些内在性质,找出其内在的规律。而这一类算法,应用最为广泛的就是“聚类”。聚类算法可以对数据进行数据归约,即在尽可能保证数据完整的前提下,减少数据的量级,以便后续处理。也可以对聚类数据结果直接应用或分析。而Kmeans算法可以说是聚类算法里面较为基础的一种算法。二.从样例开始我们现在在

系统 2019-09-27 17:50:00 2248

Python

使用C语言扩展Python程序的简单入门指引

一、简介Python是一门功能强大的高级脚本语言,它的强大不仅表现在其自身的功能上,而且还表现在其良好的可扩展性上,正因如此,Python已经开始受到越来越多人的青睐,并且被屡屡成功地应用于各类大型软件系统的开发过程中。与其它普通脚本语言有所不同,Python程序员可以借助Python语言提供的API,使用C或者C++来对Python进行功能性扩展,从而即可以利用Python方便灵活的语法和功能,又可以获得与C或者C++几乎相同的执行性能。执行速度慢是几乎

系统 2019-09-27 17:49:36 2248

Python

总结Python编程中三条常用的技巧

在python代码中可以看到一些常见的trick,在这里做一个简单的小结。json字符串格式化在开发web应用的时候经常会用到json字符串,但是一段比较长的json字符串是可读性较差的,不容易看出来里面结构的。这时候就可以用python来把json字符串漂亮的打印出来。root@Exp-1:/tmp#catjson.txt{"menu":{"breakfast":{"EnglishMuffin":{"price":7.5},"BreadBasket":{

系统 2019-09-27 17:47:56 2248

Python

python爬虫框架scrapy 豆瓣实战

Scrapy官方介绍是Anopensourceandcollaborativeframeworkforextractingthedatayouneedfromwebsites.Inafast,simple,yetextensibleway.意思就是一个开源和协作框架,用于以快速,简单,可扩展的方式从网站中提取所需的数据。环境准备本文项目使用环境及工具如下python3scrapymongodbpython3scrapy的安装就不再叙述mongodb是用来存

系统 2019-09-27 17:46:17 2248