目录一，什么是爬虫二，初识爬虫-采集汽车资讯信息三，requests和BeautifulSoup模块基本使用requests:importrequestsBeautifulSoup：frombs4importBeautifulSoup四，初识爬虫-自动登录购酒网http://order.gjw.com/login/login五，requests模块详细介绍六，一大波"自动登陆"示例一，什么是爬虫很久很久以前，还没有"百度"，"谷歌"，有的还是传说中的"大黄
系统 2019-09-27 17:56:42 2105
最近在弄一个项目分析的时候，看到有一个后缀为”.sqlite”的数据文件，由于以前没怎么接触过，就想着怎么用python来打开并进行数据分析与处理，于是稍微研究了一下。SQLite是一款非常流行的关系型数据库，由于它非常轻盈，因此被大量应用程序采用。像csv文件一样，SQLite可以将数据存储于单个数据文件，以便方便的分享给其他人员。许多编程语言都支持SQLite数据的处理，python语言也不例外。sqlite3是python的一个标准库，可以用于处理S
系统 2019-09-27 17:54:30 2105
背景说明感觉微信公众号算得是比较难爬的平台之一，不过一番折腾之后还是小有收获的。没有用Scrapy(估计爬太快也有反爬限制)，但后面会开始整理写一些实战出来。简单介绍下本次的开发环境：python3requestspsycopg2(操作postgres数据库)抓包分析本次实战对抓取的公众号没有限制，但不同公众号每次抓取之前都要进行分析。打开Fiddler，将手机配置好相关代理，为避免干扰过多，这里给Fiddler加个过滤规则，只需要指定微信域名mp.wei
系统 2019-09-27 17:53:47 2105
字串String原本不能像數值一樣有加減乘除運算，但有例外。例如:>>>'Good'+'Morning''GoodMorning'運算子+可將2個字串，串接起來。運算子+有字串Concat功能。同樣，運算子*有迭代Iterator的功能，例如:>>>'Good'*3'GoodGoodGood'這寫法讓Python的程式更簡潔易讀。例如:forkinrange(1,6):print(''*(6-k)+'A'*2*k)這樣簡潔幾行程式即能將此圖形畫出，不是很美
系统 2019-09-27 17:52:44 2105
本文实例讲述了python写日志文件操作类与应用。分享给大家供大家参考，具体如下：项目的开发过程中，日志文件是少不了的，通过写日志文件，可以知道程序运行的情况。特别当部署在生产环境中的时候，这个时候一般不能debug,当然在有些情况时可以remotedebug(远程debug)。那种情况另当别论。还是用通常的写日志的方法，比如在java中，经常可以看到log4j,sf4j,logback等三方组件来写日志。在python中如何实现呢，其实python本身也
系统 2019-09-27 17:52:05 2105
安装时是需要设置python环境变量的，下载python的时候底下有个小框框（没有默认选中）AddPython3.7toPATH需要选择的，如果没有选择的话，需要自己设置，我一般比较懒，卸载了python重新下载的，让下载器自动设置。然后是python版本问题有人疑问这是64位还是32位，看那个[64bit]是64位，至于后面的on32是在windows上使用的意思，在Linux上使用就显示别的了。然后检查pip的安装如果显示Nomodulenamed-p
系统 2019-09-27 17:51:12 2105
有几个原因使您可能想用C扩展Zope。最可能的是您有一个已能帮您做些事的现成的C库，但是您对把它转换成Python却不感兴趣。此外，由于Python是解释性语言，所以任何被大量调用的Python代码都将降低您的速度。因此，即使您已经用Python写了一些扩展，您仍然要考虑把其中最常被调用的部分改用C来写。不论哪种方式，扩展Zope都是从扩展Python开始。此外，扩展Python会给您带来其它的好处，因为您的代码将可以从任何Python脚本访问，而不只是从
系统 2019-09-27 17:49:36 2105
前言利用Python调用外部系统命令的方法可以提高编码效率。调用外部系统命令完成后可以通过获取命令执行返回结果码、执行的输出结果进行进一步的处理。本文主要描述Python常见的调用外部系统命令的方法，包括os.system()、os.popen()、subprocess.Popen()等。本文分析python调用外部系统命令主要从两个方面考虑：1、是不是可以返回命令执行结果码，因为大部分场景都需要通过判断调用命令是执行成功还是失败。2、是不是可以获取命令执
系统 2019-09-27 17:49:30 2105
importrequests,time,csvfrombs4importBeautifulSouphref_list=[]url='https://hz.58.com/lvguanbinguan'headers={'user-agent':}params={'PGTID':'0d306b32-0004-f711-87c6-3e3cb7371c0d','ClickID':'2'}res=requests.get(url,headers=headers,par
系统 2019-09-27 17:49:24 2105
在家里windows环境下搞了一次见pythonMySQLdb在windows环境下的快速安装、问题解决方式//www.jb51.net/article/65746.htm在公司开发需要，再搞一次，linux下的。发现用编译的方式安装真的很蛋疼，不过也算见见世面，各种问题......奋斗这里也有两种方式：A.快速安装B.自己编译1.最快速最简单方法（赶时间的话）复制代码代码如下:sudoyuminstallMySQL-python可能遇到问题：复制代码代码
系统 2019-09-27 17:48:02 2105
