所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地。在Python中有很多库可以用来抓取网页，我们先学习urllib2。urllib2是Python2.x自带的模块(不需要下载，导入即可使用)urllib2官网文档：https://docs.python.org/2/library/urllib2.htmlurllib2源码urllib2在python3.x中被改为urllib.requesturlopen我们先来段代码：#-*-
系统 2019-09-27 17:48:38 2309
一、线程与进程的介绍参考之前写的VC++的多线程与互斥对象：https://blog.csdn.net/Gordennizaicunzai/article/details/52268343二、python全局解析器锁（GIL）。python代码相对于其它语言在多线程效率上有个“先天性缺陷”——python有个虚拟机（又名解析器主循环）对代码进行执行控制，在解析器主循环中单位时间内只能有一个控制线在执行。意思是任意时刻只能有一个程序在运行，即使内存中有多个程
系统 2019-09-27 17:48:22 2309
前言：自动化测试存在比较多的使用限制，会存在某段时间无法使用的生疏期。通过这篇文章记录项目编写程序中遇到的问题以及解决思路，希望对以后的自动化开发能有些帮助。问题11：python链接postgre数据库问题12：python单文件打包--可以研究下多文件打包，目前还没有解决多问题打包的问题问题13：python如何生成json文件？如何将生成的文件格式化问题14：python如何创建目录，创建文件问题15：python如何写入文件内容入门之---txt问
系统 2019-09-27 17:47:37 2309
前言在Python越来越火的当下，感觉作为一个计算机专业的学生还是需要掌握一些Python的编程技能。《Python编程：从入门到实践》是一本好书，我主要学习书里最后的项目部分，因为有C/C++的学习基础，所以对Python的学习我是想通过实践，从项目中学习。这段时间打算学习书上这个Web应用程序的项目，Web的相关知识是我没接触到的，第一次看到这个项目我并没有很大的兴趣去做，因为怕现在做了之后等到工作的时候其实完全不需要用到，也早忘了。但这段时间，体验了
系统 2019-09-27 17:47:17 2309
multiprocessing.Pipe([duplex])返回2个连接对象(conn1,conn2),代表管道的两端,默认是双向通信.如果duplex=False,conn1只能用来接收消息,conn2只能用来发送消息.不同于os.open之处在于os.pipe()返回2个文件描述符(r,w),表示可读的和可写的实例如下:复制代码代码如下:#!/usr/bin/python#coding=utf-8importosfrommultiprocessingi
系统 2019-09-27 17:47:09 2309
#!/usr/bin/python#-*-coding:utf-8-*-fromemail.mime.textimportMIMETextfromemail.headerimportHeaderfromsmtplibimportSMTP_SSLimportsyssmtpaddr='smtp.qq.com'myemail='admin@qq.com'password='123456'recvmail=sys.argv[1]subject=sys.argv[2
系统 2019-09-27 17:46:16 2309
原文链接：https://jinshuju.net/f/kb1Bcq♚作者：jclian，喜欢算法，热爱分享，希望能结交更多志同道合的朋友，一起在学习Python的道路上走得更远！当我们在写程序的时候，我们需要通过测试来验证程序是否出错或者存在问题，但是，编写大量的测试来确保程序的每个细节都没问题会显得很繁琐。在Python中，我们可以借助一些标准模块来帮助我们自动完成测试过程，比如：unittest:一个通用的测试框架；doctest:一个更简单的模块，
系统 2019-09-27 17:46:11 2309
Linux中进程的通信方式有信号，管道，共享内存，消息队列socket等。其中管道是*nix系统进程间通信的最古老形式，所有*nix都提供这种通信方式。管道是一种半双工的通信机制，也就是说，它只能一端用来读，另外一端用来写；另外，管道只能用来在具有公共祖先的两个进程之间通信。管道通信遵循先进先出的原理，并且数据只能被读取一次，当此段数据被读取后，马上会从数据中消失，这一点很重要。Linux上，创建管道使用pipe函数，当它执行后，会产生两个文件描述符，分别
系统 2019-09-27 17:45:56 2309
在MAC/LINUX环境下,执行vihello.py命令，并输入以下代码importwebimportsysurls=("/Service/hello","hello")app=web.application(urls,globals())classhello:defGET(self):return'Hello,world!';if__name__=="__main__":app.run()执行pythonhello.py8080出现http://0.0.
系统 2019-09-27 17:45:27 2309
本文总结的是我们大家在python中常见的数据预处理方法，以下通过sklearn的preprocessing模块来介绍;1.标准化（StandardizationorMeanRemovalandVarianceScaling)变换后各维特征有0均值，单位方差。也叫z-score规范化（零均值规范化）。计算方式是将特征值减去均值，除以标准差。sklearn.preprocessing.scale(X)一般会把train和test集放在一起做标准化，或者在tr
系统 2019-09-27 17:38:06 2309
