背景说明感觉微信公众号算得是比较难爬的平台之一，不过一番折腾之后还是小有收获的。没有用Scrapy(估计爬太快也有反爬限制)，但后面会开始整理写一些实战出来。简单介绍下本次的开发环境：python3requestspsycopg2(操作postgres数据库)抓包分析本次实战对抓取的公众号没有限制，但不同公众号每次抓取之前都要进行分析。打开Fiddler，将手机配置好相关代理，为避免干扰过多，这里给Fiddler加个过滤规则，只需要指定微信域名mp.wei
系统 2019-09-27 17:53:47 2161
PythonsocketC/S结构的聊天室应用服务端：#!/usr/bin/envpython#coding:utf8importsocket,selectdefbroadcast_data(sock,message):forsocketinconn_list:ifsocket!=server_socketandsocket!=sock:try:socket.send(message)except:socket.close()conn_list.remov
系统 2019-09-27 17:53:37 2161
Python有一些技巧对你来说是新知识，但是还有一些技巧会让你的代码效率大幅提升。本文总结了一下自己用到的一些Python高级编程技巧，希望对大家有帮助。列表生成器a=[1,2,3][x*xforxinaifx>1][4,9]集合生成器a=[1,2,3]s={x*xforxinaifx>1}s{4,9}type(s)set字典生成器a=[1,2,3]{str(x):x+1forxinaifx>1}{'2':3,'3':4}rangelist(range(1
系统 2019-09-27 17:52:59 2161
创建数值列表列表非常适合用于存储数字集合，而Python提供了很多工具，可帮助你高效地处理数字列表。明白如何有效地使用这些工具后，即便列表包含数百万个元素，你编写的代码也能运行得很好。使用函数range()数range()让你能够轻松地生成一系列的数字。forvalueinrange(1,5):print(value)输出：1234在这个示例中，range()只是打印数字1~4，这是你在编程语言中经常看到的差一行为的结果。函数range()让Python从
系统 2019-09-27 17:52:44 2161
最近编写的自动化脚本，数据部分使用到了从配置文件中取，即自定义config.ini，但是在读取配置文件的时候却报错了'gbk'codeccan'tdecodebyte0xb0inposition30。错误信息的意思是gbk'编解码无法解码字节0xb0。开始我以为是配置文件中出现了中文字符，可检查后发现并没有。在网上查了相关资料后，无果。于是请教了其他同事，经过十几分钟的检查和验证，原来我在创建congfi.ini文件时，默认保存的编码类型是UTF-8。于是
系统 2019-09-27 17:52:28 2161
elasticsearchpython查询的两种方法，具体内容如下所述：fromelasticsearchimportElasticsearches=Elasticsearchres1=es.search(index="2018-07-31",body={"query":{"match_all":{}}})print(es1){'_shards':{'failed':0,'skipped':0,'successful':5,'total':5},'hits
系统 2019-09-27 17:51:02 2161
ftp登陆连接fromftplibimportFTP#加载ftp模块ftp=FTP()#设置变量ftp.set_debuglevel(2)#打开调试级别2，显示详细信息ftp.connect("IP","port")#连接的ftpsever和端口ftp.login("user","password")#连接的用户名，密码printftp.getwelcome()#打印出欢迎信息ftp.cmd("xxx/xxx")#进入远程目录bufsize=1024#设置
系统 2019-09-27 17:50:53 2161
#读入文件pmi_days.csv，完成以下操作：1.统计质量等级对应的天数，例如：优：5天良：3天中度污染：2天2.找出PMI2.5的最大值和最小值，分别指出是哪一天。importpandasaspdimportcsvdays_path=open(r"C:\Users\Administrator\Desktop\pmi_days.csv")days_df=pd.read_csv(days_path)data=days_df.groupby('质量等级')
系统 2019-09-27 17:50:41 2161
Python编写从ZabbixAPI获取信息此脚本用Python3.6执行是OK的。#-*-coding:utf-8-*-importjsonimporturllib.request,urllib.error,urllib.parseclassZabbixAPI:def__init__(self):self.__url='http://192.168.56.102/zabbix/api_jsonrpc.php'self.__user='admin'self
系统 2019-09-27 17:50:37 2161
Matplotlib绘制决策树代码：#coding=utf-8importmatplotlib.pyplotasplt'''遇到不懂的问题？Python学习交流群：821460695满足你的需求，资料都已经上传群文件，可以自行下载！'''decisionNode=dict(boxstyle='sawtooth',fc='10')leafNode=dict(boxstyle='round4',fc='0.8')arrow_args=dict(arrowsty
系统 2019-09-27 17:50:28 2161
