- 军军小站|张军博客
拥有Python标签的文章
Python

python中时间转换datetime和pd.to_datetime详析

前言我们在python对数据进行操作时,经常会选取某一时间段的数据进行分析。这里为大家介绍两个我经常用到的用来选取某一时间段数据的函数:datetime()和pd.to_datetime()。(一)datetime()(1)获取指定的时间和日期。datetime(%Y,%m,%d,%H,%M,%S)datetime共有6个参数,分别代表的是年月日时分秒。其中年月日是必须要传入的参数,时分秒可以不传入,默认全为零。eg:(2)将Str和Unicode转化为d

系统 2019-09-27 17:46:40 1916

Python

Python爬虫动态ip代理防止被封的方法

在爬取的过程中难免发生ip被封和403错误等等,这都是网站检测出你是爬虫而进行反爬措施,在这里为大家总结一下怎么用IP代理防止被封首先,设置等待时间:常见的设置等待时间有两种,一种是显性等待时间(强制停几秒),一种是隐性等待时间(看具体情况,比如根据元素加载完成需要时间而等待)图1是显性等待时间设置,图2是隐性第二步,修改请求头:识别你是机器人还是人类浏览器浏览的重要依据就是User-Agent,比如人类用浏览器浏览就会使这个样子的User-Agent:'

系统 2019-09-27 17:46:26 1916

Python

详解详解Python中writelines()方法的使用

writelines()方法写入字符串序列到文件。该序列可以是任何可迭代的对象产生字符串,字符串为一般列表。没有返回值。语法以下是writelines()方法的语法:fileObject.writelines(sequence)参数sequence--这是字符串的序列。返回值此方法不返回任何值。例子下面的例子显示writelines()方法的使用。#!/usr/bin/python'#Openafileinwitremodefo=open("foo.txt

系统 2019-09-27 17:46:22 1916

Python

Python使用Scrapy爬取妹子图

PythonScrapy爬虫,听说妹子图挺火,我整站爬取了,上周一共搞了大概8000多张图片。和大家分享一下。核心爬虫代码#-*-coding:utf-8-*-fromscrapy.selectorimportSelectorimportscrapyfromscrapy.contrib.loaderimportItemLoader,Identityfromfun.itemsimportMeizituItemclassMeizituSpider(scrapy

系统 2019-09-27 17:46:19 1916

Python

linux下安装python

原文链接:https://blog.csdn.net/hangdongzhang/article/details/78405483下载解压1>下载Python源码地址:https://www.python.org/downloads/我们这里下载了3.6.3版本.tgz后缀的文件。2>解压#tar-xvzfPython-3.6.3.tgz#cdPython-3.6.312编译安装#./configure--prefix=/usr/local/python3

系统 2019-09-27 17:46:18 1916

Python

在浏览器中使用TensorFlow.js和Python构建机器学习模型(附代码)

大数据文摘授权转载自数据派THU作者:MOHDSANADZAKIRIZVI本文主要介绍了:TensorFlow.js(deeplearn.js)使我们能够在浏览器中构建机器学习和深度学习模型,而无需任何复杂的安装步骤。TensorFlow.js的两个组件——CoreAPI和LayerAPI。了解如何构建一个很棒的使用Tensorflow.js对网络摄像头中的图像进行分类的模型。概述你最喜欢用什么工具来编写机器学习模型?数据科学家们对这个永恒的问题会给出各种

系统 2019-09-27 17:46:17 1916

Python

遗传算法介绍并附上Python代码

之前介绍过遗传算法,参见:https://www.cnblogs.com/LoganChen/p/7509702.html我们用Python实现同样的问题解答。y=10*sin(5*x)+7*abs(x-5)+10我们来求这个函数在0-10之间的最大值。先来看一下这个函数的图像:importnumpyasnpimportmatplotlib.pyplotasplt"""**Colors**Thefollowingcolorabbreviationsares

系统 2019-09-27 17:57:15 1915

Python

python日记整理

pycharm基本用法+markdown语法+jupyternotebook的基本操作汇总一.计算机基础什么是编程,计算机组成程序语言二.变量变量的概念python的回收机制三.数据类型基础数据类型概述数据类型概述补充四.格式化输出+基本运算+流程控制格式化输出+基本运算+流程控制if流程控制while五.内置算法+深拷贝+浅拷贝数字数据类型+字符串数据类型内置算法列表数据类型+元祖数据类型+字典数据类型内置算法集合数据类型+拷贝+浅拷贝+深拷贝六.字符串

系统 2019-09-27 17:56:14 1915

Python

Python对象体系深入分析

本文较为详细的分析了了Python的对象体系。分享给大家供大家参考。具体如下:Guido用C语言创造了Python,在Python的世界中一切皆为对象.一.C视角中的Python对象让我们一起追溯到源头,Python由C语言实现,且向外提供了C的APIhttp://docs.python.org/c-api/index.html.我们思考问题的时候,可能对于对象这种东西很容易理解,而计算机能理解的只有0,1序列这样的字节序列,从根本上讲,我们所说的计算机语

系统 2019-09-27 17:54:54 1915

Python

Python对接六大主流数据库(只需三步)

作为近两年来最火的编程语言的python,受到广大程序员的追捧必然是有其原因的,如果要挑出几点来讲的话,第一条那就python语法简洁,易上手,第二条呢?便是python有着极其丰富的第三方的库。所以不管你使用的关系型数据库是oracle,mysql,sqlserver,还是关系型数据库redis,mongoDB。python都有有与之对应的第三方库。下面就来为大家一一介绍一下!Mysql我们先来看看如何对接mysql数据库,python2和python3

系统 2019-09-27 17:53:13 1915

Python

Python pandas用法最全整理

1、首先导入pandas库,一般都会用到numpy库,所以我们先导入备用:importnumpyasnpimportpandasaspd2、导入CSV或者xlsx文件:df=pd.DataFrame(pd.read_csv('name.csv',header=1))df=pd.DataFrame(pd.read_excel('name.xlsx'))3、用pandas创建数据表:df=pd.DataFrame({"id":[1001,1002,1003,1

系统 2019-09-27 17:51:16 1915

Python

开发神技能 | Python Mock 的入门

Mock是什么Mock这个词在英语中有模拟的这个意思,因此我们可以猜测出这个库的主要功能是模拟一些东西。准确的说,Mock是Python中一个用于支持单元测试的库,它的主要功能是使用mock对象替代掉指定的Python对象,以达到模拟对象的行为。简单的说,mock库用于如下的场景:假设你开发的项目叫a,里面包含了一个模块b,模块b中的一个函数c(也就是a.b.c)在工作的时候需要调用发送请求给特定的服务器来得到一个JSON返回值,然后根据这个返回值来做处理

系统 2019-09-27 17:50:44 1915

Python

python使用mitmproxy抓取浏览器请求的方法

最近要写一款基于被动式的漏洞扫描器,因为被动式是将我们在浏览器浏览的时候所发出的请求进行捕获,然后交给扫描器进行处理,本来打算自己写这个代理的,但是因为考虑到需要抓取https,所以最后找到Mitmproxy这个程序。安装方法:pipinstallmitmproxy接下来通过一个案例程序来了解它的使用,下面是目录结构sproxy|utils|__init__.py|parser.py|sproxy.pysproxy.py代码#coding=utf-8fro

系统 2019-09-27 17:50:22 1915

Python

python九九乘法表

这个乘法表看上去比较舒服,(●’◡’●)foriinrange(1,10):#i取值1到9forjinrange(1,i+1):#j取值1到is="%d*%d=%d"%(j,i,i*j)#赋值乘法公式print(s.ljust(8),end='')#每个字符串占8字符,左对齐,i不变时结尾不换行print()#i变时换行函数defmult(n):foriinrange(1,n+1):forjinrange(1,i+1):s='%d*%d=%d'%(j,i,

系统 2019-09-27 17:49:52 1915

Python

Python格式化字符串f-string概览(小结)

简介f-string,亦称为格式化字符串常量(formattedstringliterals),是Python3.6新引入的一种字符串格式化方法,该方法源于PEP498�CLiteralStringInterpolation,主要目的是使格式化字符串的操作更加简便。f-string在形式上是以f或F修饰符引领的字符串(f'xxx'或F'xxx'),以大括号{}标明被替换的字段;f-string在本质上并不是字符串常量,而是一个在运行时运算求值的表达式:Wh

系统 2019-09-27 17:48:41 1915