Python

Python爬虫环境配置设置

1.原本安装了Python,还有必要安装Anaconda吗?有必要Anaconda,其包含了conda、Python等180多个科学包及其依赖项,是一个开源的包、环境管理器,能够在不同的环境之间切换.2.什么是MongoDB?MongoDB是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统。在高负载的情况下,添加更多的节点,可以保证服务器性能。3.什么是Robomogo?MongoDB的可视化界面。下载Robomogo免费版就足够用了4.什么是

系统 2019-09-27 17:57:08 2196

Python

《Python数据分析与挖掘实战》笔记:Apriori算法代码与使用

Apriori代码importpandasaspd#自定义连接函数,用于实现L_{k-1}到C_k的连接defconnect_string(x,ms):"""x:频繁项集列表ms:连接符,这里用‘---’return:返回长度+1的频繁项集,即L_{k-1}到C_k的连接"""x=list(map(lambdai:sorted(i.split(ms)),x))#去除序列中的连接符,并将元素排列n=len(x[0])#每个频繁项集的长度为nr=[]forii

系统 2019-09-27 17:57:00 2196

Python

python flask几分钟实现web服务的例子

目录:1.安装python32.安装flask3.简单的服务器代码编写4.设置FLASK_APP路径并启动服务器程序1.安装python3python3的安装这里就不过多赘述了,网上直接下载安装即可2.安装flask安装完Python3后我们就可以用pip工具进行安装了,当然还有很多安装方式大家可以自行百度。windows下使用cmd命令pipinstallflask3.简单的服务器代码main.pyfromflaskimportFlaskapp=Flas

系统 2019-09-27 17:56:28 2196

Python

python3实现高效的端口扫描

我们通过python-nmap实现一个高效的端口扫描工具,与定时作业crontab及邮件告警结合,可以很好的帮助我们及时发现异常开放的高危端口。当然,该工具也可以作为业务服务端口的可用性探测,例如扫描192.168.209.121-125网段Web服务端口80s是否处于open状态。我们这里所采用的scan方法arguments参数指定为-v-PE-p+端口,-v表示启用细节模式,可以返回非up状态主机清单;-PE表示采用TCP同步扫描(TCPSYN)方式

系统 2019-09-27 17:55:34 2196

Python

python word转pdf代码实例

原理使用pythonwin32库调用word底层vba,将word转成pdf安装pywin32pipinstallpywin32python代码fromwin32com.clientimportgencachefromwin32com.clientimportconstants,gencachedefcreatePdf(wordPath,pdfPath):"""word转pdf:paramwordPath:word文件路径:parampdfPath:生成p

系统 2019-09-27 17:55:09 2196

Python

让Python脚本暂停执行的几种方法(小结)

1.time.sleep(secs)参考文档原文:Suspendexecutionforthegivennumberofseconds.Theargumentmaybeafloatingpointnumbertoindicateamoreprecisesleeptime.Theactualsuspensiontimemaybelessthanthatrequestedbecauseanycaughtsignalwillterminatethesleep()

系统 2019-09-27 17:54:56 2196

Python

python_描述符

描述符:如果一个类中包含了三个魔术方法(get,set,delete)之一或者全部的类这个类就是一个描述符描述符的作用:描述符的作用就是对类/对象中某个成员进行详细的管理操作。数据描述符:(完整)同时具备三个魔术方法的类就是数据描述符非数据描述符(不完整):没有同时具备三个魔术方法的类就是非数据描述符三个魔术方法:__get__():触发时机:在访问对象成员属性(该成员已经交给描述符管理的时候)的时候触发作用:设置当前属性获取的值参数:self描述符的对象

系统 2019-09-27 17:54:25 2196

Python

Python跨文件全局变量的实现方法示例

前言在C语言中,由于变量一定是先声明,后使用,所以我们可以清楚的知道,现在使用的变量是全局还是局部,比如:inta=5;voidtest(void){a=1;//没有先声明,所以用的是全局的变量a}voidtest1(void){inta;a=2;//前面声明了,所以用的是局部变量a,对其所做的修改不会影响全局变量a}voidmain(void){printf("before:a=%d\n",a);test();printf("aftertest:a=%d

系统 2019-09-27 17:53:03 2196

Python

python3写爬取B站视频弹幕功能

需要准备的环境:一个B站账号,需要先登录,否则不能查看历史弹幕记录联网的电脑和顺手的浏览器,我用的ChromePython3环境以及request模块,安装使用命令,换源比较快:pip3installrequest-ihttp://pypi.douban.com/simple爬取步骤:登录后打开需要爬取的视频页面,打开开发者工具台,Chrome可以使用F12快捷键,选择network监听请求点击查看历史弹幕,获取请求其中rolldate后面的数字表示该视频

系统 2019-09-27 17:52:52 2196

Python

linux中如何使用python3获取ip地址

前言这篇文章主要介绍了linux中如何使用python3获取ip地址,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下。一、不带参数#!/usr/bin/python#-*-coding:UTF-8-*-importosdefget_ip():#注意外围使用双引号而非单引号,并且假设默认是第一个网卡,特殊环境请适当修改代码out=os.popen("ifconfig|grep'inetaddr:'|grep-

系统 2019-09-27 17:52:11 2196

Python

python urllib爬虫模块使用解析

前言网络爬虫也称为网络蜘蛛、网络机器人,抓取网络的数据。其实就是用Python程序模仿人点击浏览器并访问网站,而且模仿的越逼真越好。一般爬取数据的目的主要是用来做数据分析,或者公司项目做数据测试,公司业务所需数据。而数据来源可以来自于公司内部数据,第三方平台购买的数据,还可以通过网络爬虫爬取数据。python在网络爬虫方向上有着成熟的请求、解析模块,以及强大的Scrapy网络爬虫框架。爬虫分类1、通用网络爬虫:搜索引擎使用,遵守robots协议(君子协议)

系统 2019-09-27 17:51:27 2196

Python

Python爬虫:将headers请求头字符串转为字典的方法

原生请求头字符串raw_headers="""Host:open.tool.hexun.comPragma:no-cacheCache-Control:no-cacheUser-Agent:Mozilla/5.0(Macintosh;IntelMacOSX10_13_2)AppleWebKit/537.36(KHTML,likeGecko)Chrome/63.0.3239.84Safari/537.36Accept:*/*Referer:http://st

系统 2019-09-27 17:51:16 2196

Python

leetcode 139. 单词拆分 Python

分类题目解题思路Python实现题目给定一个非空字符串s和一个包含非空单词列表的字典wordDict,判定s是否可以被空格拆分为一个或多个在字典中出现的单词,地址。说明:拆分时可以重复使用字典中的单词。你可以假设字典中没有重复的单词。示例1输入:s="leetcode",wordDict=["leet","code"]输出:true解释:返回true因为"leetcode"可以被拆分成"leetcode"。示例2输入:s="catsandog",wordD

系统 2019-09-27 17:50:35 2196

Python

Python中的模块和包概念介绍

模块概述如果说模块是按照逻辑来组织Python代码的方法,那么文件便是物理层上组织模块的方法。因此,**一个文件被看作是一个独立模块,一个模块也可以被看作是一个文件。模块的文件名就是模块的名字加上扩展名.py。与其它可以导入类(class)的语言不同,在Python中你导入的是模块或模块属性**。模块名称空间一个名称空间就是一个名称到对象的关系映射.导入模块导入模块整体(import)方式一复制代码代码如下:importmodule1importmodul

系统 2019-09-27 17:50:08 2196

Python

python @classmethod 的使用场合详解

官方的说法:classmethod(function)中文说明:classmethod是用来指定一个类的方法为类方法,没有此参数指定的类的方法为实例方法,使用方法如下:classC:@classmethoddeff(cls,arg1,arg2,...):...看后之后真是一头雾水。说的啥子东西呢???自己到国外的论坛看其他的例子和解释,顿时就很明朗。下面自己用例子来说明。看下面的定义的一个时间类:classData_test(object):day=0mo

系统 2019-09-27 17:49:54 2196