这次只演示了，如何在真实项目内用到BeautifulSoup库来解析网页，而新浪的新闻是ajax加载过来的数据，在这里我们只演示解析部分数据（具体反扒机制没做分析）。代码地址：https://gitee.com/dwyui/BeautifulSoup_xinlang.git。关于的爬虫的博客已经越来越多，使用到的技术也越来越多，后期我还会持续写下去，大概从几个角度去写，多线程爬取（提高效率），如何更好的做到爬取数据（破解反扒）。用redis管理多线程和代理
系统 2019-09-27 17:45:54 1964
少劳多得Decorator与Python之前引入的元编程抽象有着某些共同之处：即使没有这些技术，您也一样可以实现它们所提供的功能。正如MicheleSimionato和我在可爱的Python专栏的早期文章中指出的那样，即使在Python1.5中，也可以实现Python类的创建，而不需要使用“元类”挂钩。Decorator根本上的平庸与之非常类似。Decorator所实现的功能就是修改紧接Decorator之后定义的函数和方法。这总是可能的，但这种功能主要是
系统 2019-09-27 17:38:33 1964
通过下面的步骤让你由浅入深明白装饰器是什么。假定你拥有最基本的Python知识，本文阐述的东西可能对那些在工作中经常接触Python的人有很大的帮助。1、函数（Functions）在Python里，函数是用def关键字后跟一个函数名称和一个可选的参数表列来创建的，可以用关键字return指定返回值。下面让我们创建和调用一个最简单的函数：>>>deffoo():...return1>>>foo()1该函数的函数体（在Python里将就是多行语句）是强制性的并
系统 2019-09-27 17:38:30 1964
什么是twisted？twisted是一个用python语言写的事件驱动的网络框架，他支持很多种协议，包括UDP,TCP,TLS和其他应用层协议，比如HTTP，SMTP，NNTM，IRC，XMPP/Jabber。非常好的一点是twisted实现和很多应用层的协议，开发人员可以直接只用这些协议的实现。其实要修改Twisted的SSH服务器端实现非常简单。很多时候，开发人员需要实现protocol类。一个Twisted程序由reactor发起的主循环和一些回调
系统 2019-09-27 17:38:27 1964
1.python中的变量：python中的变量声明不需要像C++、Java那样指定变量数据类型（int、float等），因为python会自动地根据赋给变量的值确定其类型。如radius=20，area=radius*radius*3.14159，python会自动的将radius看成“整型”，area看成“浮点型”。所以编程时不用再像之前那样小心翼翼的查看数据类型有没有出错，挺人性化的。2.input和print：先贴个小的程序#Prompttheuse
系统 2019-09-27 17:37:41 1964
RFC文档有很多，有时候在没有联网的情况下也想翻阅，只能下载一份留存本地了。看了看地址列表，大概是这个范围：http://www.networksorcery.com/enp/rfc/rfc1000.txt...http://www.networksorcery.com/enp/rfc/rfc6409.txt哈哈，很适合批量下载，第一个想到的就是迅雷……可用的时候发现它只支持三位数的扩展(用的是迅雷7)，我想要下的刚好是四位数……郁闷之下萌生自己做一个的想
系统 2019-09-27 17:37:38 1964
问题描述:在使用LotusNotes时，当注册完一个新用户之后，是否能自动发送一封欢迎邮件给此用户？如果您修改邮箱模板并将这封欢迎邮件放到其中，那么这封邮件只会在手动创建邮箱库的时候予以保留。解答:这个问题作为产品的新功能请求已经提交到相关的人员，SPR号为HHAA5HJB9G，目前来讲并没有计划去实现该功能。但是可以采用其他的办法去间接地实现。可以通过用户首次打开数据库的“关于数据库”文档来实现，也可以在邮箱模板的数据库资源包含的数据库Script中的P
系统 2019-08-29 23:47:06 1964
我想大家都知道qq农场吧？今天闲来无事，突发奇想，准备酝酿一个类似的网页游戏。废话不说，具体如下：-----------------------------------------------这不是一个异常--------------------------------------------------这一款模拟经营类游戏，每个人注册登录后，都有一个初始的属性，根据起始做的选择题，分配一定的属性。每个人起手没有金钱，可以选择在系统控制的比如商店，农场，牧
系统 2019-08-29 23:46:44 1964
1.引言在并发编程中我们有时候需要使用线程安全的队列。如果我们要实现一个线程安全的队列有两种实现方式：一种是使用阻塞算法，另一种是使用非阻塞算法。使用阻塞算法的队列可以用一个锁（入队和出队用同一把锁）或两个锁（入队和出队用不同的锁）等方式来实现，而非阻塞的实现方式则可以使用循环CAS的方式来实现，本文让我们一起来研究下DougLea是如何使用非阻塞的方式来实现线程安全队列ConcurrentLinkedQueue的，相信从大师身上我们能学到不少并发编程的技
系统 2019-08-29 22:40:24 1964
Terms数据磁盘文件存储细节从这篇开始，已经涉及到倒排索引表的信息存储问题了。我们都知道倒排索引表中的Dictionary有许多不同的terms组成，Lucene关于这些terms数据的存储，就放在磁盘的.tii和.tis文件中。★.tii词典索引文件.tis词典数据文件1、tii保存了tis中每隔IndexInterval个词的位置信息，这是为了加快对词典文件tii中词的查找速度具体结构如下：TermInfoIndex(.tii)-->TIVersio
系统 2019-08-29 21:59:40 1964
