前言网络爬虫也称为网络蜘蛛、网络机器人，抓取网络的数据。其实就是用Python程序模仿人点击浏览器并访问网站，而且模仿的越逼真越好。一般爬取数据的目的主要是用来做数据分析，或者公司项目做数据测试，公司业务所需数据。而数据来源可以来自于公司内部数据，第三方平台购买的数据，还可以通过网络爬虫爬取数据。python在网络爬虫方向上有着成熟的请求、解析模块，以及强大的Scrapy网络爬虫框架。爬虫分类1、通用网络爬虫：搜索引擎使用，遵守robots协议（君子协议）
系统 2019-09-27 17:51:27 2184
需要用到的库：操作xls格式的表格文件：读取：xlrd写入：xlwt修改（追加写入）：xlutils操作Excel文件的实用工具，如复制、分割、筛选等操作xlsx格式的表格文件：读取/写入：openpyxl新建，写入内容，保存。#coding=utf-8importxlwtimportxlrdtry:#创建excel文件filename=xlwt.Workbook()#给工作表命名，testsheet=filename.add_sheet("test")#
系统 2019-09-27 17:51:19 2184
分类题目解题思路Python实现题目给定一个非空字符串s和一个包含非空单词列表的字典wordDict，判定s是否可以被空格拆分为一个或多个在字典中出现的单词，地址。说明：拆分时可以重复使用字典中的单词。你可以假设字典中没有重复的单词。示例1输入:s="leetcode",wordDict=["leet","code"]输出:true解释:返回true因为"leetcode"可以被拆分成"leetcode"。示例2输入:s="catsandog",wordD
系统 2019-09-27 17:50:35 2184
最近在学习机器学习的过程中，常常需要将本地写的代码传到GPU服务器中，然后在服务器上运行。之前的做法一直是先在本地写好代码，然后通过FileZilla这样的文件传输工具来将写好的文件传到服务器，再通过ssh工具远程连接到服务器，执行相应的python脚本。这样的方式十分繁琐，效率很低。今天听到朋友提到了配置远程解释器使用场景先说说自己的使用场景，我是在什么情况下，需要将IDE配置成这样的环境来方便我的工作。首先，我需要在本地机子上写python代码，但是因
系统 2019-09-27 17:46:10 2184
在我开发的系统，需要子线程去运行，然后把运行的结果发给UI线程，让UI线程知道运行的进度。首先创建线程很简单defnewThread(self):d=Data()print'子线程的运行't1=threading.Thread(target=newThread)t1.setDaemon(True)t1.start()之后我发现用子线程去调用UI线程是行不通的，只能通过信号和槽来实现，于是首先，定义一个类，让他实现PySide.QtCore.QObject类
系统 2019-09-27 17:38:32 2184
函数和模块的使用在讲解本章节的内容之前，我们先来研究一道数学题，请说出下面的方程有多少组正整数解。$$x_1+x_2+x_3+x_4=8$$事实上，上面的问题等同于将8个苹果分成四组每组至少一个苹果有多少种方案。想到这一点问题的答案就呼之欲出了。$$C_M^N=\frac{M!}{N!(M-N)!},\text{(M=7,N=3)}$$可以用Python的程序来计算出这个值，代码如下所示。"""输入M和N计算C(M,N)"""m=int(input('m=
系统 2019-09-27 17:38:21 2184
导入模块import语句想使用Python源文件，只需在另一个源文件里执行import语句，语法如下：importmodule1[,module2[,...moduleN]当解释器遇到import语句，如果模块在当前的搜索路径就会被导入。搜索路径是一个解释器会先进行搜索的所有目录的列表。如想要导入模块hello.py，需要把命令放在脚本的顶端：#!/usr/bin/python#-*-coding:UTF-8-*-#导入模块importsupport#现在
系统 2019-09-27 17:38:12 2184
今天想用python的装饰器做一个运算，代码如下>>>defmu(x):def_mu(*args,**kwargs):returnx*xreturn_mu>>>@mudeftest(x,y):print'%s,%s'%(x,y)>>>test(3,5)Traceback(mostrecentcalllast):File"",line1,intest(3,5)File"",line3,in_mureturnx*xTypeError:unsupportedop
系统 2019-09-27 17:37:36 2184
1、Oracle8/8i/9i数据库（thin模式）Class.forName("oracle.jdbc.driver.OracleDriver").newInstance();Stringurl="jdbc:oracle:thin:@localhost:1521:orcl";//orcl为数据库的SIDStringuser="test";Stringpassword="test";Connectionconn=DriverManager.getConne
系统 2019-08-29 23:47:19 2184
[1b]什么是FlashComServer？[/1b]（略）[1b]什么是FlashCom应用程序[/1b]也就是一个和FlashCommunicationServer交流的Flash应用程序，可以是一对一，也可以是一对多，甚至多对多的模式，还可以用作智能化的机器人交流，例如进行实时的数据传送和通知。一个典型的FlashCom应用程序包含：1:应用程序入口：网页或独立应用程序，通常包含一些SWF文件2:客户端swf文件：可以是网页或独立应用程序形式，一般包
系统 2019-08-29 23:34:44 2184
