搜索到与相关的文章
Python

Python信息抽取之乱码解决办法

Python信息抽取之乱码解决办法就事论事,直说自己遇到的情况,和我不一样的路过吧,一样的就看看吧信息抓取,用python,beautifulSoup,lxml,re,urllib2,urllib2去获取想要抽取的页面内容,然后使用lxml或者beautifulSoup进行解析,插入mysql具体的内容,好了貌似很简单很easy的样子,可是里面的恶心之处就来了,第一,国内开发网站的人在指定网站编码或者是保存网站源码的时候并没有考虑什么编码,反正一句话,一个

系统 2019-09-27 17:54:45 2330

Python

Python爬虫 12306抢票开源代码过程详解

今天就和大家一起来讨论一下python实现12306余票查询(pycharm+python3.7),一起来感受一下python爬虫的简单实践我们说先在浏览器中打开开发者工具(F12),尝试一次余票的查询,通过开发者工具查看发出请求的包可以看到红框框中的URL就是我们向12306服务器发出的请求,那么具体是什么呢?我们来看看https://kyfw.12306.cn/otn/leftTicket/queryZ?leftTicketDTO.train_date

系统 2019-09-27 17:54:34 2330

Python

python之uwsgi配置

uwsg基础配置[uwsgi]#当前文件所处的文件夹chdir=%dproject_name=%cuser=@(exec://whoami)virtualenv=/home/keithl/workdir/python/pyenv/%(project_name)#loadaWSGImodulewsgi-file=wsgi_admin_handler.pymaster=true#setthesocketlistenqueuesizelisten=100#本机内

系统 2019-09-27 17:53:47 2330

Python

Python 之禅

TheZenofPython,byTimPetersPython之禅byTimPetersBeautifulisbetterthanugly.优美胜于丑陋(Python以编写优美的代码为目标)Explicitisbetterthanimplicit.明了胜于晦涩(优美的代码应当是明了的,命名规范,风格相似)Simpleisbetterthancomplex.简洁胜于复杂(优美的代码应当是简洁的,不要有复杂的内部实现)Complexisbetterthanc

系统 2019-09-27 17:52:28 2330

Python

python使用dos命令将多个文件拼接成一个

情景:我用python爬取了很多.ts的文件,他们是一个个只有几秒的短视频,现在想把它们合并成一个电影:合并的命令copy/b*.tsnew_name.mp4/b是以二进制的形式合并:现在我要执行的命令为:copy/bD:\pythonFetch\movie\20190905\*.tsD:\pythonFetch\movie\20190905\new.mp4及将D:\pythonFetch\movie\20190905\文件夹下所有的.ts后缀的文件以二进

系统 2019-09-27 17:50:37 2330

Python

python matplotlib库绘制散点图例题解析

假设通过爬虫你获取到了北京2016年3,10月份每天白天的最高气温(分别位于列表a,b),那么此时如何寻找出气温随时间(天)变化的某种规律?a=[11,17,16,11,12,11,12,6,6,7,8,9,12,15,14,17,18,21,16,17,20,14,15,15,15,19,21,22,22,22,23]b=[26,26,28,19,21,17,16,19,18,20,20,19,22,23,17,20,21,20,22,15,11,15,

系统 2019-09-27 17:48:45 2330

Python

python设计tcp数据包协议类的例子

一.问题描述在tcp编程中,最需要解决的就是粘包分包问题。所以,我们需要在每个数据包前面加上数据包的长度用以分割粘连的包。二.包结构的设计包的组成:包长度+数据域包长度:用4个字节存储数据域长度,数据域长度即为其所占字节数数据域:由若干个变量组成,如果是定长变量则不用加变量长度定长变量:我们人为规定,传输中的int为4字节定长变量变长变量:那就是字符串啦文字难理解,那我就画个图吧:上图的第一行是数据包的一个总体结构第二行是数据域内部的一个结构(数据域的变量

系统 2019-09-27 17:46:34 2330

Python

python直接访问私有属性的简单方法

实例化对象名._类名__私有属性名classFlylove:price=123def__init__(self):self.__direction='gobeijing.'zIng='waitcar,manyperson'if__name__=='__main__':printFlylove.pricefly=Flylove()printfly._Flylove__direction以上这篇python直接访问私有属性的简单方法就是小编分享给大家的全部内容

系统 2019-09-27 17:46:19 2330

Python

python爬虫常用的模块分析

本文对Python爬虫常用的模块做了较为深入的分析,并以实例加以深入说明。分享给大家供大家参考之用。具体分析如下:creepy模块某台湾大神开发的,功能简单,能够自动抓取某个网站的所有内容,当然你也可以设定哪些url需要抓。地址:https://pypi.python.org/pypi/creepy功能接口:set_content_type_filter:设定抓取的content-type(header中的contenttype)。包括text/htmla

系统 2019-09-27 17:45:57 2330

Python

Python基础教程学习笔记 第二章 列表和元组

1、序列中元素的索引:第一个元素索引是0,第二个是1,依次递增最后一个元素索引是-1,倒数第二个是-2,依次递减2、序列(Sequence)的种类:列表(list)、元组(tuple)、字符串(string)、Unicode字符串、buffer对象、xrange对象3、列表和元组的区别:列表可以进行修改,但是元组不行4、tuple常作为字典的键5、序列都可以进行以下操作:索引(indexing)、分片(sliceing)、加(adding)、乘(multi

系统 2019-09-27 17:37:36 2330