搜索到与相关的文章
Python

python爬虫———多线程threading模块爬取抖音用户信息

爬虫背景:由于原来的数据库中有1.5亿左右的用户id,但是其中有1.2亿的用户资料是不完整的(没有粉丝数量,点赞数量等,算是无用数据),现在老板要求将这些没有资料的用户更新信息,咋办?刚开始的想法是使用主从模式+scrapy爬取,但是写着写着觉得麻烦(写python的都很懒,scrapy还是比较臃肿的),然后突然想到,python中的多线程,处理爬虫这种存在大量io的操作时,多线程是非常有用的,而且省服务器资源(其他的爬虫也在服务器,能省一点是一点,毕竟是

系统 2019-09-27 17:52:29 2442

Python

python实现壁纸批量下载代码实例

项目地址:https://github.com/jrainlau/wallpaper-downloader前言好久没有写文章了,因为最近都在适应新的岗位,以及利用闲暇时间学习python。这篇文章是最近的一个python学习阶段性总结,开发了一个爬虫批量下载某壁纸网站的高清壁纸。注意:本文所属项目仅用于python学习,严禁作为其他用途使用!初始化项目项目使用了virtualenv来创建一个虚拟环境,避免污染全局。使用pip3直接下载即可:pip3inst

系统 2019-09-27 17:52:28 2442

Python

基数排序(python)

10.基数排序10.1算法思想基数排序是对桶排序的扩展。第一类:最低位优先法,简称LSD法:先从最低位开始排序,再对次低位排序,直到对最高位排序后得到一个有序序列;第二类:最高位优先法,简称MSD法:先从最高位开始排序,再逐个对各分组按次高位进行子排序,循环直到最低位。(位没有数的话,补0)这里以LSD为例,由于待排序元素每一位上的数字的取值范围是0—9,因此每按照某一位,需要10个桶,这样每一位上相同的数字会分配到一个桶里。10.2算法过程假设有一未排序

系统 2019-09-27 17:49:44 2442

Python

Python学习资源 | 3个高性能开源计算机视觉库

0.OpenCV:OpenCV是在BSD许可下发布的,是开源计算机视觉库,对学术和商业都是免费的。具有C+、Python和Java接口,支持Windows、Linux、MacOS、IOS和Android。OpenCV是为了提高计算效率而设计的,并且非常注重实时应用程序。该库采用优化的C/C+语言编写,可利用多核处理.通过OpenCL启用,它可以利用底层异构计算平台的硬件加速。1.SimpleCV:SimpleCV是一个用于构建计算机视觉应用程序的开源框架。

系统 2019-09-27 17:49:06 2442

Python

使用python实现简单五子棋游戏

用python实现五子棋简单人机模式的练习过程,供大家参考,具体内容如下第一次写博客,我尽力把它写好。最近在初学python,今天就用自己的一些粗浅理解,来记录一下这几天的python简单人机五子棋游戏的练习,下面是实现过程的理解(是在cmd中运行的):主要流程:*重点内容*-首先是模块及类的划分-棋子类和棋盘类的方法-对策略类里的功能进行细分,调用棋子类和棋盘类-写出判断输赢的方法-用main函数进行整个游戏进度的控制模块及类的划分类的划分涉及到了面向对

系统 2019-09-27 17:48:43 2442

Python

python 用户交互输入input的4种用法详解

用户输入1、使用input来等待用户输入。如username=input('username:')password=input('password:')print(username,password)2、格式化输出第一种方法:字符串拼接+(不建议使用,太耗内存)name=input("name:")age=input("age:")skill=input("skill:")salary=input("salary:")info='''---infoof''

系统 2019-09-27 17:37:52 2442

Java

如何用JNI技术提高Java的性能详解

阻碍Java获得广泛应用的一个主要因素是Java程序的运行效率。Java是介于解释型和编译型之间的一种语言,同样的程序,如果用编译型语言C来实现,其运行速度一般要比Java快一倍以上。Java具有平台无关性,这使人们在开发企业级应用的时候总是把它作为主要候选方案之一,但是性能方面的因素又大大削弱了它的竞争力。为此,提高Java的性能就显得十分重要。问题的提出Sun公司及Java的支持者们为提高Java的运行速度已经做出了许多努力,其中大多数集中在程序设计的

系统 2019-08-29 23:16:03 2442

编程技术

Air实现的一个互联网聚合应用客户端

用AdobeAir写了一个程序,聚合了一些互联网应用。这是主控面板,您可以选择需要的互联网服务。新闻模块,可以查看国内、国外、体育、娱乐等最新新闻并且支持自定义关键字搜索视频模块,既有推荐的热点视频,也可以点播你想要的视频。游戏模块,放松一下,比较经典的几个小游戏。地图模块,这个就不解释了。音乐模块,支持榜单和自定义音乐的在线收听、下载以及歌词的预览。单独的GOGO.air安装包在附件。也可以下载这个WindowsAllinOne版本(包含gogo.air

系统 2019-08-29 23:12:57 2442

Java

推荐给所有在自学JavaWeb的朋友们---自学者之参

在Java技术领域,JavaWeb应用开发空前活跃,致使许多程序员都积极地学习有关JavaWeb开发技术,但是面对众多的开发技术,许多人会感到困惑,不知如何学习,如何在实战中应用这些技术。本书就是为完整地学习JavaWeb开发技术后,想整合应用且逐步过渡到轻量级JavaEE开发的人员准备的。本书内容融入了作者多年的JavaWeb开发经验。本书第二版在前版的基础上扩充了相关的基础知识,并提供了更贴切的实用型案例。此书被多所高校采用为教材,在第二版的修订中,因

系统 2019-08-29 22:44:27 2442