爬虫工作的三个基本步骤：爬取网页、解析内容、存储数据准备先安装爬取网页需要用到的第三方库：requests和bs4pipinstallrequestspipinstallbs4爬取网页#coding:UTF-8importrequestslink="http://www.santostang.com/"headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(K
系统 2019-09-27 17:57:02 2306
早期的计算机通信需要有一个中间件,A要给B传东西,A必须要把信息传给中间件,B再把从中间件中拿到信息由于不同机器之间需要通信就产生了网络软件开发的架构1.C/S架构服务器-客户机,即Client-Server架构,C/S架构通常采取两层结构.Sever负责数据的管理,Client负责完成与用户的交互任务这里来说Client主要是某个应用软件的exe文件,程序要在安装后,才能运行在用户电脑上。例如:QQ、微信、网易云音乐等2.B/S架构浏览器端-服务器,即B
系统 2019-09-27 17:56:56 2306
python小技巧记录我发现1、str转bool方法2、python判断文件和文件夹是否存在、创建文件夹3、文件操作4、python字典遍历的几种方法4.1、遍历key值4.2、遍历value值4.3、遍历字典项4.4、遍历字典健值5、Python列表(List)的三种遍历(序号和值)方法6、python字典判断某个Key是否存在我发现好多有用的小技巧其实都不难，但是每次用的时候，我都要去百度，主要是懒得去记，刚好突然有个想法，总结一些实用小技巧，归类整理
系统 2019-09-27 17:56:06 2306
Python获取当前路径实现代码importos,sys使用sys.path[0]、sys.argv[0]、os.getcwd()、os.path.abspath(__file__)、os.path.realpath(__file__)sys.path是Python会去寻找模块的搜索路径列表，sys.path[0]和sys.argv[0]是一回事因为Python会自动把sys.argv[0]加入sys.path。如果你在C:\test目录下执行python
系统 2019-09-27 17:55:39 2306
作者|喵叔责编|胡巍巍出品|CSDN（ID：CSDNnews）爬虫应用的广泛，例如搜索引擎、采集数据、广告过滤、数据分析等。当我们对少数网站内容进行爬取时写多个爬虫还是有可能的，但是对于需要爬取多个网站内容的项目来说是不可能编写多个爬虫的，这个时候我们就需要智能爬虫。智能爬虫目前有三种：1.基于网页内容的爬虫当网页含有大量需要提取的信息时，我们就需要用到基于网页内容的爬虫。该爬虫会将HTML视为文本并利用NLP技术进行处理。虽然说这种基于网页内容的爬虫可以
系统 2019-09-27 17:55:06 2306
Hello，Everyone！Python是个好东西！好吧，以黎某人这寒碜的赞美之词，实在上不了台面，望见谅。那我们直接来上干货吧。第一步：下载Python安装包https://www.python.org/1.进入Python官网，点击download2.进入之后有两个安装包供选择（Python会根据你系统的位数智能选择，所以这里不用纠结你的电脑是32位的还是64位）我的建议是下载Python3.0后面的版本，因为Python3在Python2的基础上，
系统 2019-09-27 17:54:44 2306
装饰器这东西我看了一会儿才明白，在函数外面套了一层函数，感觉和java里的aop功能很像；写了2个装饰器日志的例子，第一个是不带参数的装饰器用法示例，功能相当于给函数包了层异常处理，第二个是带参数的装饰器用法示例，将日志输出到文件。```#coding=utf8importtracebackimportloggingfromlogging.handlersimportTimedRotatingFileHandlerdeflogger(func):defin
系统 2019-09-27 17:54:25 2306
目录基础部分shutil.copyfileobj(file1，file2)：shutil.copyfile(file1，file2)：其他shutil.copymode(file1，file2)：shutil.copystat(file1，file2)：shutil.copy(file1，file2)：shutil.copy2(file1，file2)：shutil.copytree(源目录，目标目录)：shutil.rmtree(目标目录)：shutil
系统 2019-09-27 17:49:33 2306
preface流式数据的监控，以下主要是从算法的呈现出发，提供一种python的实现思路其中：1.python是2.X版本2.提供两种实现思路，一是基于matplotlib的animation，一是基于matplotlib的ion话不多说，先了解大概的效果，如下：一、一点构思在做此流数据输出可视化前，一直在捣鼓nupic框架，其内部HTM算法主要是一种智能的异常检测算法，是目前AI框架中垂直领域下的一股清流，但由于其实现的例子对应的流数据展示并非我想要的，
系统 2019-09-27 17:49:22 2306
一、函数的定义及其应用所谓函数，就是把具有独立功能的代码块组织成为一个小模块，在需要的时候调用函数的使用包含两个步骤1.定义函数�C封装独立的功能2.调用函数�C享受封装的成果函数的作用:在开发时，使用函数可以提高编写的效率以及代码的重用‘'函数：函数是带名字的代码块，用于完成具体的工作需要在程序中多次执行同一项任务时，你无需反复编写完成该任务的代码，而只需调用该任务的函数，让python运行其中的代码，你将发现，通过使用函数，程序编写，阅读，测试和修复都
系统 2019-09-27 17:48:58 2306
