- 军军小站|张军博客
搜索到与相关的文章
Python

【Python爬虫】MongoDB爬虫实践:爬取虎扑论坛

MongoDB爬虫实践:爬取虎扑论坛网站地址为:https://bbs.hupu.com/bxj1.网站分析首先,定位网页上帖子名称、帖子链接、作者、作者链接、创建时间、回复数目、浏览数目、最后回复用户、最后回复时间等信息的位置,之后,我们使用BeautifulSoup在网页中定位这些。数据所在的位置数据位置某帖子所有数据‘li’帖子名称divclass="titlelinkbox">a帖子链接divclass="titlelinkbox">a['href

系统 2019-09-27 17:55:14 2377

Python

Python对接 xray 和微信实现自动告警

xray是什么xray是从长亭洞鉴核心引擎中提取出的社区版漏洞扫描神器,支持主动、被动多种扫描方式,自备盲打平台、可以灵活定义POC,功能丰富,调用简单,支持Windows/macOS/Linux多种操作系统,可以满足广大安全从业者的自动化Web漏洞探测需求。如何第一时间知道扫出了漏洞对于安全工程师来说,扫描器发现了漏洞能第一时间给出告警是非常重要的,因为安全工程师使用的是xray的基础爬虫模式,爬虫一直在爬也不会一直人工刷新和查看漏洞报告,也有可能是使用

系统 2019-09-27 17:54:33 2377

Python

, not bytes报错原因及Python3写入二进制文件方法

Python2随机写入二进制文件:defsave(text,filename='temp',path='download'):fpath=os.path.join(path,filename)withopen(fpath,'w')asf:print('output:',fpath)f.write(text)但使用Python3会报错:TypeError:mustbestr,notbytes原因为:Python3给open函数添加了名为encoding的新参

系统 2019-09-27 17:52:52 2377

Python

Python程序中的进程操作-进程同步(multiprocess.Lock)

目录一、多进程抢占输出资源二、使用锁维护执行顺序三、多进程同时抢购余票四、使用锁来保证数据安全通过刚刚的学习,我们千方百计实现了程序的异步,让多个任务可以同时在几个进程中并发处理,他们之间的运行没有顺序,一旦开启也不受我们控制。尽管并发编程让我们能更加充分的利用IO资源,但是也给我们带来了新的问题:当多个进程使用同一份数据资源的时候,就会引发数据安全或顺序混乱问题。一、多进程抢占输出资源importosimporttimeimportrandomfromm

系统 2019-09-27 17:49:09 2377

Python

Python 动态导入对象,importlib.import_module

背景一个函数运行需要根据不同项目的配置,动态导入对应的配置文件运行。解决文件结构a#文件夹│a.py│__init__.pyb#文件夹│b.py│__init__.py├─c#文件夹│c.py│__init__.py#c.py中内容args={'a':1}classC:defc(self):pass目的向a模块中导入c.py中的对象解决方案a.pyimportimportlibparams=importlib.import_module('b.c.c')#

系统 2019-09-27 17:45:58 2377

编程技术

System.Data.DataTable计算功能详解

usingSystem;usingSystem.ComponentModel;usingSystem.Data;usingSystem.Windows.Forms;namespaceWindowsApplication1...{publicpartialclassForm1:Form...{publicForm1()...{InitializeComponent();}privatevoidbutton1_Click(objectsender,EventA

系统 2019-08-29 23:52:53 2377

编程技术

中小企业安全路由器配置及管理

路由器的配置及管理,是网管进行路由器工作的第一步。这个简单的基本工作,在很多情况,都需要路由器的功能支持,才能达到安全方便的目的。因此对于一个网管而言,必须在购置路由器时,就选择具备足够功能的产品,才能在需要时进行配置。若是路由器的功能太简单,通常会造成网管工作上的困难,甚至是网络安全受到威胁的情况。下表列出在配置及管理方面,常面临的一些问题及对应的解决功能:项目问题解决功能1使用窗口以外操作系统,是否可以操作?使用没有中文的操作系统是否可以操作?中/英文

系统 2019-08-29 23:51:23 2377

编程技术

UML设计的9种图例

首先对UML中的各个图的功用做一个简单介绍:1、用例图描述角色以及角色与用例之间的连接关系。说明的是谁要使用系统,以及他们使用该系统可以做些什么。一个用例图包含了多个模型元素,如系统、参与者和用例,并且显示了这些元素之间的各种关系,如泛化、关联和依赖。2、类图类图是描述系统中的类,以及各个类之间的关系的静态视图。能够让我们在正确编写代码以前对系统有一个全面的认识。类图是一种模型类型,确切的说,是一种静态模型类型。3、对象图与类图极为相似,它是类图的实例,对

系统 2019-08-29 23:49:38 2377

编程技术

大地震到底震断了几条光缆?

来自solidot:Telegeography在最近的新闻列表中给出了详细的说明,并且绘制了海底光缆的示意图(访问很慢,所以我下下来了,在文章最后)(其中红色为受影响的光缆)。根据他们的研究,这次中断是有史以来同时最多的光缆同时断裂。在通过菲律宾吕宋海峡的九条光缆里面,断了七条。Telegeography预测亚洲以后可能将进一步增加对欧洲的联接,来减少对北美网络联接的依赖。我的天那,断了这么多光缆,怪不得会这样,原来我还以为只是断了几条而已。想不通的是,为

系统 2019-08-29 23:15:00 2377

编程技术

微软操作系统XP、Vista、win 7与浏览器IE最新市

最新一期操作系统XP、Vista、win7市场占有率,XP出现下降,看图:从图中看出11月份,XP市场份额为69.05%,Vista为18.55%,Windows7则在短短一个月的时间达到了4.0%的市场占有率。那些IE方面的表现呢?很明显可以看出IE市场份额为63.61%,Firefox为24.74%,Safari为4.36%,GoogleChrome为3.92%,Opera占有率为2.31%。文章来自学IT网:http://www.xueit.com/

系统 2019-08-29 22:58:25 2377