这次只演示了，如何在真实项目内用到BeautifulSoup库来解析网页，而新浪的新闻是ajax加载过来的数据，在这里我们只演示解析部分数据（具体反扒机制没做分析）。代码地址：https://gitee.com/dwyui/BeautifulSoup_xinlang.git。关于的爬虫的博客已经越来越多，使用到的技术也越来越多，后期我还会持续写下去，大概从几个角度去写，多线程爬取（提高效率），如何更好的做到爬取数据（破解反扒）。用redis管理多线程和代理
系统 2019-09-27 17:45:54 1874
创建一个软件包（package）似乎已经足够简单了，也就是在文件目录下搜集一些模块，再加上一个__init__.py文件，对吧？我们很容易看出来，随着时间的推移，通过对软件包的越来越多的修改，一个设计很差的软件包可能会出现循环依赖问题，或是可能变得不可移植和不可靠。1.__init__.py仅为导入服务对于一个简单的软件包，你可能会忍不住把工具方法，工厂方法和异常处理都丢进__init__.py，千万别这样！一个结构良好的__init__.py文件，仅为一
系统 2019-09-27 17:45:42 1874
Python2中编码相关的问题很是让人蛋疼，特别是中文字符。比如本文所述的中文网页GBK编码的诡异问题。现象例如：盲录�氓��，其实网页里面正常的应该是会员分析接着上面的例子，会员这部分乱码通过repr()函数求值得到如下结果\xc3\xa4\xc2\xbc\xc2\x9a\xc3\xa5\xc2\x91\xc2\x98使用type()函数求值得到的结果为unicodeeval(repr())出来值为盲录�氓��通过查表上述6个汉字对应c3a4c2bcc2
系统 2019-09-27 17:45:40 1874
最近开发了一个GoogleAnalytics相关的应用，但需要在Windows下部署，结合网上的相关经验，最终选择了apache+mod_wsgi这样的配置。修改python应用复制代码代码如下:Notethatmod_wsgirequiresthattheWSGIapplicationentrypointbecalled'application'.Ifyouwanttocallitsomethingelsethenyouwouldneedtoconfig
系统 2019-09-27 17:38:15 1874
在使用google或者baidu搜图的时候会发现有一个图片颜色选项，感觉非常有意思，有人可能会想这肯定是人为的去划分的，呵呵，有这种可能，但是估计人会累死，开个玩笑，当然是通过机器识别的，海量的图片只有机器识别才能做到。那用python能不能实现这种功能呢？答案是：能利用python的PIL模块的强大的图像处理功能就可以做到，下面上代码：importcolorsysdefget_dominant_color(image):#颜色模式转换，以便输出rgb颜色
系统 2019-09-27 17:38:08 1874
在实际应用中，你将用Django模板系统来创建整个HTML页面。这就带来一个常见的Web开发问题：在整个网站中，如何减少共用页面区域（比如站点导航）所引起的重复和冗余代码？解决该问题的传统做法是使用服务器端的includes，你可以在HTML页面中使用该指令将一个网页嵌入到另一个中。事实上，Django通过刚才讲述的{%include%}支持了这种方法。但是用Django解决此类问题的首选方法是使用更加优雅的策略――模板继承。本质上来说，模板继承就是先构造
系统 2019-09-27 17:37:53 1874
昨日等车无聊时，打开手机，玩起了自己做的一款手机游戏。突然想起以前写代码的趣事。记得当时写代码写到天昏地暗，突然遇到瓶径，如何解决闪烁问题。也许是长时间写代码的原因，大脑有点缺氧，百思居然不得其解。于是上网查找，居然无解...仔细一想，网上既然无解。那只有两种可能：要么就是太简单，不是问题；要么就是太复杂无人能解。显然不是后者...悲剧，难道我一向自负的天资出卖了我就在这时。停电了...我恍然大悟，原来我把简单的事情弄复杂了，闪烁其实没有那么复杂。setv
系统 2019-08-29 23:46:45 1874
CNET科技资讯网8月28日北京报道微软今天宣布其新一代互联网多媒体交互式内容播放应用插件——Silverlight将于今年9月正式发布。微软（中国）有限公司平台与开发合作部总监林毅介绍，Silverlight具有三方面优质特性，包括：高清晰、互动、天然SEO特性。微软今天宣布其新一代互联网多媒体交互式内容播放应用插件——Silverlight将于今年9月正式发布。微软同时向国内媒体预览了Silverlight的部分功能。Silverlight是一种跨平台
系统 2019-08-29 23:43:09 1874
自己最近在玩lucene，在做高亮的时候并没有发现org.apache.lucene.search这个包里有highlight文件夹，但我看到网上很多帖子上有SimpleHTMLFormatter这个类的，为什么我的没有，有图为证是不是我的版本不对啊我用的是jar是lucene-core-2.3.2.jar，在seacher包里只有function、payloads、spans三个文件夹。谁来帮我看看啊！！！Help！！Lucene-core-2.3.2.
系统 2019-08-29 23:36:27 1874
这个教程和以前经典出现的平滑滚动原理完全不同绝非抄袭功能也有区别flash演示+教程：[url=http://www.blueidea.com/articleimg/2004/06/1950/show.html]http://www.blueidea.com/articleimg/2004/06/1950/show.html[/url]FLA源代码下载：[url=http://www.blueidea.com/articleimg/2004/06/1950
系统 2019-08-29 23:35:54 1874
