抓取动态的网页内容主要有两种办法，一种是通过开发者工具找到动态内容的接口，然后分析接口的参数和返回值来爬取网站的数据。另外一种是通过模拟浏览器来抓取数据。python的Selenium库就可以通过代码来模拟浏览器抓取数据。一、概述运行Selenium需要依赖于Python的selenium库，以及浏览器对应驱动器（WebDriver）。安装selenium库pipinstallselenium项目地址：https://pypi.org/project/se
系统 2019-09-27 17:47:10 1779
你学习到今日，会发现python你基本都掌握了。可以完成基本的东西。。。。。突然有个问题，是为什么我还不能搞程序，完整实现一点东西（贵在坚持，入门就想吃大胖子，想太多了）另外一个问题，我们写出来简单的代码，本来一个很简单的内容，但是真正能用缺要debug很久。。。。（排查）bug###是昆虫，臭虫的意思，在计算机发展过程中，有一个故事，就是昆虫依附在电路板某个地方，导致无法开机。。。debug###就是驱虫，除虫的意思。（会网络的朋友，经常无奈的时候会de
系统 2019-09-27 17:47:06 1779
我们在定义Python类时，经常会看到比较好的代码中，都有__repr__和__string__,两个内部函数的定义。但是我一直很少关注它们的区别和具体应用场景。稍微做个小结。1.__foo()__在python中表示__foo__是一个私有private函数，在CookBookpp254中，解释为，该函数不会被子类的相同名称的函数重载。一般地说，类中以“下划线”开头定义的变量或者函数都是私有变量或者内部函数，区别是：1.1单下划线开始的变量或者函数表示非
系统 2019-09-27 17:46:49 1779
方法调用行为方法调用比其他类型的查找略为复杂一点。以下是一些注意事项：在方法查找过程中，如果某方法抛出一个异常，除非该异常有一个silent_variable_failure属性并且值为True，否则的话它将被传播。如果异常被传播，模板里的指定变量会被置为空字符串，比如:>>>t=Template("Mynameis{{person.first_name}}.")>>>classPersonClass3:...deffirst_name(self):...
系统 2019-09-27 17:46:44 1779
通俗的来说，Python中所谓的命名空间可以理解为一个容器。在这个容器中可以装许多标识符。不同容器中的同名的标识符是不会相互冲突的。理解python的命名空间需要掌握三条规则：第一，赋值（包括显式赋值和隐式赋值）产生标识符，赋值的地点决定标识符所处的命名空间。第二，函数定义（包括def和lambda）产生新的命名空间。第三，python搜索一个标识符的顺序是"LEGB"。所谓的"LEGB"是python中四层命名空间的英文名字首字母的缩写。最里面的一层是L
系统 2019-09-27 17:46:43 1779
原文链接：https://gitbook.cn/books/5cfdc7e67d79973578df3426/index.html7.什么是PEP8?8.了解Python之禅么？9.了解docstring么？10.了解类型注解么？11.例举你知道Python对象的命名规范，例如方法或者类等12.Python中的注释有几种？13.如何优雅的给一个函数加注释？14.如何给变量加注释？15.Python代码缩进中是否支持Tab键和空格混用。16.是否可以在一句i
系统 2019-09-27 17:46:40 1779
问题：测试时收发流采用TestCenter、SmartBit等仪表来进行。如果仍采用其进行自动化冒烟，则会带来效率低、成本高的问题。解决方案：采用网卡来收发流，虽然有性能统计上的缺陷，但可以验证一些基本功能，且经济。采用scapy模块，1-获取计算机网卡的iface，并预先设计好用哪些iface进行收发流；2-conf.L2listen对各个iface进行监听3-subprocess.Popen来调用tShark.exe启动抓包，也可以调用ping.exe
系统 2019-09-27 17:46:36 1779
当在python中遍历一个序列时，我们通常采用如下的方法：foriteminsequence:process(item)如果要取到某个item的位置，可以这样写：forindexinrange(len(sequence)):process(sequence[index])另一个比较好的方式是使用python内建的enumerate函数：enumerate(sequence,start=0)上述函数中，sequence是一个可迭代的对象，可以是列表，字典，文
系统 2019-09-27 17:46:14 1779
django使用app机制来实现组件的重用，充分的利用已有的app可以极大的简化开发工作。目前django下的app虽然还不够丰富，却也还是有部分不错的。django-tagging就是一个不错的app。现在tag的应用非常广泛，tag基本上成了各网站的必备项目之一，django-tagging就是一个提供tag功能的app。django-tagging提供的功能非常丰富，使用起来却十分简单。下面我就介绍一些常用的用法，让大家对该app有个基本的了解，更详
系统 2019-09-27 17:46:09 1779
本文实例讲述了Python实现的统计文章单词次数功能。分享给大家供大家参考，具体如下：题目是这样的：你有一个目录，放了你一个月的日记，都是txt，为了避免分词的问题，假设内容都是英文，请统计出你认为每篇日记最重要的词。其实就是统计一篇文章出现最多的单词，但是要去除那些常见的连词、介词和谓语动词等，代码：#coding=utf-8importcollectionsimportreimportosuseless_words=('the','a','an','a
系统 2019-09-27 17:45:54 1779
SQLite是一个小型的关系型数据库，它最大的特点在于不需要单独的服务、零配置。我们在之前讲过的两个数据库，不管是MySQL还是MongoDB，都需要我们安装。安装之后，然后运行起来，其实这就相当于已经有一个相应的服务在跑着。SQLite与前面所说的两个数据库不同。首先Python已经将相应的驱动模块作为了标准库的一部分，只要是你安装了Python，就可以使用；再者它可以类似于操作文件那样来操作SQLite数据库文件。还有一点，SQLite源代码不受版权限
系统 2019-09-27 17:45:49 1779
美空网数据----简介从今天开始，我们尝试用2篇博客的内容量，搞定一个网站叫做“美空网”网址为：http://www.moko.cc/，这个网站我分析了一下，我们要爬取的图片在下面这个网址http://www.moko.cc/post/1302075.html然后在去分析一下，我需要找到一个图片列表页面是最好的，作为一个勤劳的爬虫coder，我找到了这个页面http://www.moko.cc/post/da39db43246047c79dcaef44c2
系统 2019-09-27 17:45:41 1779
装饰器：概念：把一个函数当作参数传递给一个函数，返回一个替代版的函数本质上就是一个返回函数的函数“在不改变原函数的基础上，给函数增加功能”@符号，那只是一个简短的方式来生成一个被装饰的函数defpaint(func):参数是一个函数definner():print('#########')这个的整个部分就都是装饰器func()returninner@paint这个就是函数戴帽子，也就是装饰器deffunc():print('haveaniceday!!')
系统 2019-09-27 17:45:41 1779
最近不少人在微信问我现在Python还好就业不好就业？发展前景怎么样？我30多岁了，还能不能转行编程？Python该怎么学？如果做Python到底该做爬虫还是数据分析还是web？......等等这样的问题，现在逐一谈下我的看法，进而引申出目前如果做python，最好要掌握的一些技能以及我个人认为的很稳的发展路线，这里分析的观点会以大部分普通开发者的角度来看待，对一些技术牛人可能就不太适用了。1、Python好就业吗？其实，对于这些问题，我是不太想回答的，可
系统 2019-09-27 17:45:29 1779
1.编译nginx在网上买了一本《实战nginx-取代Apache的高性能服务器》，写的比较浅，主要是些配置方面的东西，不过却正是目前我所需要的。由于需要支持https和rewrite，所以除了nginx的源码之外，又下载了openssl-0.9.8r.tar.gz和pcre-8.12.tar.gz，把他们和nginx-1.0.4.tar.gz放到同一个目录。为了方便编译，笔者写了一个脚本，代码如下:#!/bin/bash#================
系统 2019-09-27 17:38:47 1779
