众所周知python的拿手好戏就是爬虫抓取数据，性能优秀，抓取时间快，消耗低，这是python的优势。学会了爬虫后那我们就可以抓取竞争对手的数据，可以对数据进行分析，或者拿来使用（作者不赞成这样做哦）。最重要是对数据进行分析，这样对我们的运营自己的产品，提高用户的新增或留存都是很有帮助的，正所谓现在是大数据年代，没有数据我们也能利用别人的数据。那要怎样才能更好去学习python爬虫呢？今天推荐一本最新使用python3的书籍，值得阅读。《Python3网络
系统 2019-09-27 17:47:38 1998
需要建立2个文件，一个作为客户端，一个作为服务端文件一作为客户端client，文件二作为服务端server文件一#client客户端#TCP必须建立连接importsocket#导入模块#SOCK_STREAM---TCP协议方式#AF_INET----我的是ipv4地址#1,创建socket对象：指定传输协议s=socket.socket(socket.AF_INET,socket.SOCK_STREAM)#2，建立连接发送连接请求ip地址和端口号s.c
系统 2019-09-27 17:47:20 1998
前一章介绍了python中的集中基本数据类型，本章着重记录python中str字符串类型数据的应用。str字符串主要由两种方法，一种是方法，一种是魔术方法。由于内容实在过于多，本章只介绍其中的方法。我会按照pycharm给的内置方法顺序（即字母排列顺序）全部依次介绍各种方法的使用。print(dir(str))"""'__add__','__class__','__contains__','__delattr__','__dir__','__doc__',
系统 2019-09-27 17:46:53 1998
为了加快网站的加载速度，我们通常要多js和css进行压缩处理。这些js和css的压缩工作如果都手动处理，费时费力。DjangoCompressor可以实现js/css的自动压缩。DjangoCompressor在易用性方面做的非常好，按照文档做简单的设置后就可以正常工作。强烈建议大家去将文档完整的看一遍（文档很短）。使用的时候，只需要将css/js放到compress标签中DjangoCompressor即可自动进行处理。在debug模式时，DjangoC
系统 2019-09-27 17:46:13 1998
Python中将数字格式化时，有些时候需要将数字格式化，为了显示美观，需要补零。今天在写代码时，看见别人的奇怪写法，觉得有必要在这里把Python更好的写法重写一下。看到的别人的代码foriinrange(99):num_str=str(i)iflen(num_str)>1:num_str='0'+str(i)print(num_str)看到这段代码，我的三观被刷新了。如果补零比较多，确实代码的行数可观。常见和不常见的格式化补零方法foriinrange(
系统 2019-09-27 17:45:59 1998
最近需要爬取某网站，无奈页面都是JS渲染后生成的，普通的爬虫框架搞不定，于是想到用Phantomjs搭一个代理。Python调用Phantomjs貌似没有现成的第三方库（如果有，请告知小编），漫步了一圈，发现只有pyspider提供了现成的方案。简单试用了一下，感觉pyspider更像一个为新手打造的爬虫工具，好比一个老妈子，有时无微不至，有时喋喋不休。轻巧的小工具应该更受人喜爱，我也怀着一点私心，可以带着我最爱的BeautifulSoup一块儿用，而不用
系统 2019-09-27 17:38:44 1998
1、安装virtulenv、virtulenvwrapper包pipinstallvirtualenvvirtualenvwrapper2、virtualenvwrapper是virtualenv的扩展工具，可以方便的创建、删除、复制、切换不同的虚拟环境。3、设置环境变量，把下面两行添加到~/.bash_profile里exportWORKON_HOME=/software/venvsource/usr/local/bin/virtualenvwrappe
系统 2019-09-27 17:38:34 1998
测了一下django、flask、bottle、tornado框架本身最简单的性能。对django的性能完全无语了。django、flask、bottle均使用gunicorn+gevent启动，单进程，并且关闭DEBUG，请求均只返回一个字符串ok。tornado直接自己启动，其他内容一致。测试软件为siege，测试os为cenos664位，测试命令为:复制代码代码如下:siege-c100-r100-bhttp://127.0.0.1:5000/dja
系统 2019-09-27 17:38:25 1998
一.安装pythonmac系统其实自带了一个python的执行执行环境，用来运行python还行，但是开发可能就不够了，因此我们需要重新安装python。这里有两种方案安装：1.homebrewbrewinstallpython这个方案比较简单,如果出错的话可以给前面加sudo试试,这个安装的python可能不是最新版.2.从官网下载安装大家可以从https://www.python.org/download下载安装最新版的python,安装比较无脑,一路
系统 2019-09-27 17:37:37 1998
自然界中蝴蝶品种繁多，色彩斑斓，形态各异，通过本课的学习，掌握一种蝴蝶的画法，希望大家画出更多不同的美丽蝴蝶来。效果演示：1、新建图形元件，命名身，画轮廓。填充颜色。2、新建图形元件，命名翅，画翅膀的轮廓。填充颜色。线性填充，从左至右，色标：073765、876D5E、C49583、FEFFEF、FFFFEB、FFE187、FFE187、C77B59、02183D、2F3440。这里我弄得比较复杂，大家可以简单点。剩下的填充白色，再画些白色斑点装饰下。画线
系统 2019-08-29 23:42:40 1998
