网络爬虫，是在网上进行数据抓取的程序，使用它能够抓取特定网页的HTML数据。虽然我们利用一些库开发一个爬虫程序，但是使用框架可以大大提高效率，缩短开发时间。Scrapy是一个使用Python编写的，轻量级的，简单轻巧，并且使用起来非常的方便。使用Scrapy可以很方便的完成网上数据的采集工作，它为我们完成了大量的工作，而不需要自己费大力气去开发。首先先要回答一个问题。问：把网站装进爬虫里，总共分几步？答案很简单，四步：新建项目(Project)：新建一个新
系统 2019-09-27 17:54:44 2170
原文链接：https://blog.csdn.net/qq_38656841/article/details/82921951python开发的代码可能在其他windows上并不能使用用，除非别人的环境中也有python。下面是如何将python开发的东西转为exe格式1.安装pyinstallerpipinstallpyinstaller2.跳到需要转为exe文件的python文件目录下面，运行命令pyinstaller--onefilepython文件
系统 2019-09-27 17:53:37 2170
计算机为数组分配一段连续的内存，从而支持对数组随机访问；由于项的地址在编号上是连续的，数组某一项的地址可以通过将两个值相加得出，即将数组的基本地址和项的偏移地址相加。数组的基本地址就是数组的第一项的机器地址。一个项的偏移地址就等于它的索引乘以数组的一个项所需要的内存单元数目的一个常量表示（在python中，这个值总是1）importarray#array模块是python中实现的一种高效的数组存储类型。它和list相似，但是所有的数组成员必须是同一种类型，
系统 2019-09-27 17:53:12 2170
首先需要有连接mongodb数据库基本信息:CONFIG_HOST='11.111.11.11'CONFIG_PORT='27017'CONFIG_DATABASE='databasename'CONFIG_USER='username'CONFIG_PASSWORD=XXXXXXCONFIG_TABLE='tablename'python通过pymongo对mongodb进行访问，提取出databasename中tablename中的colname_a,
系统 2019-09-27 17:53:00 2170
在Python操作数据内容时，多数情况下可能遇到下面3种类型的数据处理：hexstring如：'1C532145697A8B6F'str如：'\x1C\x53\x21\x45\x69\x7A\x8B\x6F'list如：[0x1C,0x53,0x21,0x45,0x69,0x7A,0x8B,0x6F]各种第三方模块（如pyDes），或者自己写的接口中，可能存在由于类型不统一需要在这3种数据中来回切换的情况。需要用到的核心的方法如下：list()将对象转换为
系统 2019-09-27 17:52:42 2170
一位置传递没什么好过多讲解.#位置传递实例:deffun1(a,b,c):returna+b+cprint(fun1(1,2,3))输出：6二关键字传递更具每个参数的名字写入函数参数#关键字传递deffun2(a,b,c):returna+b+cprint(fun2(1,c=3,b=2))输出：6三参数默认值传递给函数的输入参数设定一个默认值,如果该参数最终没有输入,则使用默认参数出入函数.#默认值传递deffun3(a,b=2,c=3):returna+
系统 2019-09-27 17:52:29 2170
原文链接：https://blog.csdn.net/Anwel/article/details/79967261非常使用的方法：(亲测有效果)importpymysql#xlrd为python中读取excel的库，支持.xls和.xlsx文件#importxlrd#openpyxl库支持.xlsx文件的读写fromopenpyxl.reader.excelimportload_workbookfrombuiltinsimportint#cur是数据库的游
系统 2019-09-27 17:51:55 2170
格式getopt(args,options[,long_options])1.args表示要解析的参数.2.options表示脚本要识别的字符.字符之间用”:”分隔,而且必须要以”:”后结尾,例如”a:b:c:”.3.long_options是可选的,如果指定的话,可以解析长选项.形式为字符串列表,如[‘foo=',‘frob='].长选项要求形式为”�Cname=value”4.该方法返回2个元素.第一个元素是列表对,对中第一个值是带有”-“或者”�C”
系统 2019-09-27 17:50:08 2170
访问FTP，无非两件事情：upload和download，最近在项目中需要从ftp下载大量文件，然后我就试着去实验自己的ftp操作类，如下（PS：此段有问题，别复制使用，可以参考去试验自己的ftp类！）importosfromftplibimportFTPclassFTPSync():def__init__(self,host,usr,psw,log_file):self.host=hostself.usr=usrself.psw=pswself.log_
系统 2019-09-27 17:48:23 2170
本文实例讲解了Python实现全角半角转换的方法，相信对于大家的Python学习能够起到一定的参考借鉴价值。如下所示：一、全角半角转换概述：全角字符unicode编码从65281~65374（十六进制0xFF01~0xFF5E）半角字符unicode编码从33~126（十六进制0x21~0x7E）空格比较特殊,全角为12288（0x3000）,半角为32（0x20）而且除空格外,全角/半角按unicode编码排序在顺序上是对应的所以可以直接通过用+-法来处
系统 2019-09-27 17:46:42 2170
