Python

python爬虫获取网站数据

要爬取的网站不需要登陆,没有反爬机制,操作很简单首先安装需要的程序包pipinstallrequestspipinstallbeautifulsoup4pipinstallxlwt具体的实现类GetInfo.py#信息实体类classproduct_info(object):serios=''#存放商品系列productActualPrice=''#存放商品成交价productOldPrice=''#存放商品面价detailString=''#存放商品详情

系统 2019-09-27 17:47:27 2121

Python

Python常用正则表达式符号浅析

对Python中正则表达式的理解,主要就是对符号的理解,本文即对Python中常用的正则表达式符号进行简析。其主要的符号有:.默认匹配一个字符,不包含换行符,如果设置DOTALL则匹配换行符^匹配行首$匹配行尾*匹配0个或者多个重复+匹配一个或者多个重复?匹配一个或者零个重复*?,+?,??按照非贪婪模式匹配{m},{m,n},{m,n}?分别匹配m个重复,m至n个重复,m至n个重复按照非贪婪模式\转义[][abc],[a-z][^a-z]|或者匹配'a|

系统 2019-09-27 17:46:52 2121

Python

【Python练习圣典】字典dictionary高级操作

1.字典键-值对中,值元素的便捷创建增减主要是利用collections中的defaultdict普通复杂过程:pairs=[('a',1),('a',2),('b',2)]d={}forkey,valueinpairs:ifkeynotind:d[key]=[]d[key].append(value)或d={}#普通字典d.setdefault('a',[]).append(1)d.setdefault('a',[]).append(2)d.setdef

系统 2019-09-27 17:46:20 2121

Python

自学Python编程的第一天----------来自苦逼的转行人

学习Python的第一天,也是我第一次写博客的一天,不怎么会写博客,也不怎么会Python,也不怎么会写总结.在学Python的第一天发现自己脑子不是很好用,在学习过程中出现很多错误,错误锦集如下,哈哈哈哈,要加油.以后要注意不要再犯下面的错误了,不然以后在工作中很难独立完成,也容易出现很多错误,这样就不好了啊!!!下面是我的知识总结和错误总结,如果有IT大佬看见了,希望能指出我的不足之处,让我好改进改进,可以进步.======我======是======

系统 2019-09-27 17:46:07 2121

Python

Python迭代用法实例教程

本文实例讲述了Python中迭代的用法,是一个非常实用的技巧。分享给大家供大家参考借鉴之用。具体分析如下:如果给定一个list或tuple,我们可以通过for循环来遍历这个list或tuple,这种遍历我们成为迭代(Iteration)。在Python中,迭代是通过for...in来完成的,而很多语言比如C或者Java,迭代list是通过下标完成的,比如Java代码:for(i=0;i可以看出,Python的for循环抽象程度要高于Java的for循环,因

系统 2019-09-27 17:45:31 2121

Python

Python 实现文件的全备份和差异备份详解

Python实现文件的全备份和差异备份之前有写利用md5方式来做差异备份,但是这种md5方式来写存在以下问题:md5sum获取有些软连接的MD5值存在问题不支持对空目录进行备份,因为md5sum无法获取空目录的md5值权限的修改md5sum无法判断解决方案:利用文件的mtimectimemtime(Modifiedtime)是在写入文件时随文件内容的更改而更改的ctime(Createtime)是在写入文件、更改所有者、权限或链接设置时随Inode的内容更

系统 2019-09-27 17:45:28 2121

Python

Phantomjs抓取渲染JS后的网页(Python代码)

最近需要爬取某网站,无奈页面都是JS渲染后生成的,普通的爬虫框架搞不定,于是想到用Phantomjs搭一个代理。Python调用Phantomjs貌似没有现成的第三方库(如果有,请告知小编),漫步了一圈,发现只有pyspider提供了现成的方案。简单试用了一下,感觉pyspider更像一个为新手打造的爬虫工具,好比一个老妈子,有时无微不至,有时喋喋不休。轻巧的小工具应该更受人喜爱,我也怀着一点私心,可以带着我最爱的BeautifulSoup一块儿用,而不用

系统 2019-09-27 17:38:44 2121

Python

利用python批量检查网站的可用性

前言随着站点的增多,管理复杂性也上来了,俗话说:人多了不好带,我发现站点多了也不好管,因为这些站点里有重要的也有不重要的,重要核心的站点当然就管理的多一些,像一些万年都不出一次问题的,慢慢就被自己都淡忘了,冷不丁那天出个问题,还的手忙脚乱的去紧急处理,所以规范的去管理这些站点是很有必要的,今天我们就做第一步,不管大站小站,先统一把监控做起来,先不说业务情况,最起码那个站点不能访问了,要第一时间报出来,别等着业务方给你反馈,就显得我们不够专业了,那接下来我们

系统 2019-09-27 17:38:21 2121

Python

Python 的内置字符串方法小结

字符串处理是非常常用的技能,但Python内置字符串方法太多,常常遗忘,为了便于快速参考,特地依据Python3.5.1给每个内置方法写了示例并进行了归类,便于大家索引。PS:可以点击概览内的绿色标题进入相应分类或者通过右侧边栏文章目录快速索引相应方法。大小写转换str.capitalize()将首字母转换成大写,需要注意的是如果首字没有大写形式,则返回原字符串。'adidog'.capitalize()#'Adidog''abcd徐'.capitaliz

系统 2019-09-27 17:37:47 2121

编程技术

047_《Delphi技术手册》

《Delphi技术手册》Delphi教程系列书籍(047)《Delphi技术手册》网友(邦)整理EMail:shuaihj@163.com下载地址:Pdf附书源码原书名:DelphiinaNutshell原出版社:O'Reilly作者:(美)RayLischner译者:肖雪莲朱腾辉丛书名:O'Reilly系列出版社:中国电力出版社ISBN:7508305426上架时间:2001-8-8出版日期:2001年4月页码:636版次:1-1内容简介Inprise/

系统 2019-08-29 23:43:15 2121

编程技术

用FLASH MX制作动画卡通人物(2)-矢量图形的转

6.赶快把PHOTOSHOP关掉!!开的窗口太多,搞得机器半死不活了:(!!7.在FLASH中新建文件。Ctrl+R导入GIF图:比较大...先不进行缩放。选择Modify-traceBitmap,将位图打散成矢量图。PS:Color指颜色的容差值(从0-500),略选大点。MinimumArea指包含的像素范围。可以按PHOTOSHOP中魔术棒的参数来理解。如果我理解有误,那就是...贻误网友了。说了这么多,总算转换完了...如果是彩图,还得多写几行PS

系统 2019-08-29 23:42:37 2121

编程技术

js 验证大全

js验证表单大全1.长度限制<

系统 2019-08-29 23:33:05 2121

编程技术

如何创建ADF Application Module 使用的JNDI数

ADF应用通常部署在Weblogic中,本文介绍如何在Weblogic中创建JDNI数据源,并将该数据源提供给ADF应用中的AM使用。1,在AM中,ConnectionType选择JDBCDataSource,输入自定义的DatasourceName2,启动Weblogic服务器,在主页中选择JDBC->数据源->新建数据源名称任意,JNDI名称需要跟AM中的DatasourceName保持一致。3,下一步,数据库驱动一般选择下图的选项:4,下一步,信息默

系统 2019-08-29 23:33:04 2121

编程技术

事件和委托

基于事件的编程是.NETFramework的基石.NETFramework中的事件机制使用了委托(回调)事件作为一种常用的方法来解除事件源对象(生成事件的对象)与事件接收器对象(接受事件通知的对象)之间的耦合。委托类似于应用程序中指向对象中方法的指针3个步骤:1声明委托类型2创建委托对象,并将该对象绑定指定方法上3使用委托对象来调用方法.NETFramework支持两种类型的委托单播委托:允许一个对象上调用一个方法多播委托:允许在不同对象上调用一系列方法,

系统 2019-08-29 23:28:42 2121

编程技术

双11,你怎么过?码农们!!!

今天就是传说中的双11啊,面对广大的码农的屌丝生活,你怎么过??在淘宝购物?在宿舍宅着?趁着周末约会?还是干嘛呢?元芳,你怎么看?System.out.println("123");2.partialclassOrder:IAggregateRoot3.{4.publicSingleTotalDiscount5.{6.get7.{8.returnthis.Lines.Sum(p=>p.Discount);9.}10.}11.12.publicSingleT

系统 2019-08-29 22:52:43 2121