搜索到与相关的文章
Python

Python学习笔记之爬虫 汇总篇(更新中)

[TOC]Python网络爬虫之规则01Python爬虫之Requests库入门02Python爬虫之盗亦有道03Python爬虫之Requests网络爬取实战Python网络爬虫之提取04Python爬虫之BeautifulSoup库05Python爬虫之信息标记与提取方法06Python爬虫之Re(正则表达式)库

系统 2019-09-27 17:46:30 2146

Python

详解Python网络爬虫功能的基本写法

网络爬虫,即WebSpider,是一个很形象的名字。把互联网比喻成一个蜘蛛网,那么Spider就是在网上爬来爬去的蜘蛛。1.网络爬虫的定义网络蜘蛛是通过网页的链接地址来寻找网页的。从网站某一个页面(通常是首页)开始,读取网页的内容,找到在网页中的其它链接地址,然后通过这些链接地址寻找下一个网页,这样一直循环下去,直到把这个网站所有的网页都抓取完为止。如果把整个互联网当成一个网站,那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。这样看来,网络爬虫

系统 2019-09-27 17:38:28 2146

Python

Python读大数据txt

如果直接对大文件对象调用read()方法,会导致不可预测的内存占用。好的方法是利用固定长度的缓冲区来不断读取文件内容。即通过yield。在用Python读一个两个多G的txt文本时,天真的直接用readlines方法,结果一运行内存就崩了。还好同事点拨了下,用yield方法,测试了下果然毫无压力。咎其原因,原来是readlines是把文本内容全部放于内存中,而yield则是类似于生成器。代码如下:defopen_txt(file_name):withope

系统 2019-09-27 17:38:24 2146

Python

Centos Python2 升级到Python3的简单实现

1.从Python官网到获取Python3的包,切换到目录/usr/local/src#wgethttps://www.python.org/ftp/python/3.5.1/Python-3.5.1.tar.xz2.使用命令如下命令进行解压缩:1xz-dPython-3.5.1.tar.xz2tar-xfPython-3.5.1.tar.xz3.在/usr/local路径下创建目录--python3.5,为第4步的安装目录$mkdir/usr/local

系统 2019-09-27 17:38:17 2146

Python

python+webdriver自动化环境搭建步骤详解

python是一个很好脚本语言工具,现在也比较流行的一个脚本语言工具,对目前web自动化可以用的比较是webdriver框架进行自动化测试,脚本写起来较简单,运行的占用的内容较小。那么对windown下python+webdriver自动化环境如何进行搭建。下载一个python.exe文件,直接默认安装即可配置python的环境,指定到python的路径安装pip环境,从网上下载一个pip,解压完成后,进入解压目录下执行pythonsetupinstall

系统 2019-09-27 17:37:53 2146

编程技术

穿越红尘不扰关,回旋天地去复还

实在不好意思,前一段我家老爷子住院做了个颈椎手术,最近他老人家身体好了(刚刚和母上逛公园去了),我也就闲下来了。很长时间没上博客,也没有读任何邮件,非常对不住大家,这两天我会补回来。——————————————————————————————————————————————————不过,这段时间小弟并非什么都没干,话说LGame的0.3.3正式版,已经到了整理下代码就能发的程度了,顺便传两张图。我对Java版也做了一些修正,比如小弟最近将ADT升级到2.0

系统 2019-08-29 23:43:22 2146

编程技术

用FLASH MX制作动画卡通人物(3)-给人物上色

11.开始上色了。一般情况下,用到的主要是填充工具。上色的过程大同小异,所以这里只列出重要的几项。因为填充工具对颜色封闭范围有要求,在填充前,须进行设置:若开口较大则用线将其封闭:头发可使用渐变工具做出光泽效果,当然没有手绘的逼真,不过颜色有规律,做出来文件小,适用于网络。先设置填充渐变值(圆形),填入头发部分:在填充工具被选择时,下面会有填充变形(TransformFill)工具,它可以修改渐变的形状,大小,位置等值。选择该工具后,鼠标就这样了:在头发渐

系统 2019-08-29 23:42:39 2146

编程技术

最简单的可拖拽窗口教程

弹出窗口,并且可以拖拽,可以关闭,这个是很多时候都用得到的效果,特别是教师做课件的时候。但是菜鸟如我者是不会使用窗口组件的,无他,因为实在是太麻烦,一来颜色不对的话不会换,二来看看说明要关闭还要按什么侦听事件什么的,看得我头都大啦。下载外国的高级窗口组件吧,又不会使。哎~~~~~为了广大跟我一样菜的鸟,我弄了个自定义窗口的简单教程,希望各位高手不要笑话才好。1.首先做一个窗口的样式出来,包括顶上的长方块和正文方块。当然了这个要尽量好看才行。2.把这个窗口的

系统 2019-08-29 23:35:29 2146

编程技术

flash list组件与CellRenderer API

FlashMX2004中的新组件对于我们开发网络应用程序的确带来了很大的方便,无论是在美观和易使用方面都得到了不错的评价。开发应用程序过程中相信大家使用的比较多的还是基于列表的组件(List、DataGrid、Tree和Menu),DataGrid、Tree和Menu组件是List类的扩展.下面引用FlashMX2004帮助文档中的一段描述。关于List类的构成List类由行构成。这些行显示滑过和选区突出显示,用作行选区的点击状态,并在滚动中扮演重要的角色

系统 2019-08-29 23:29:19 2146