- 军军小站|张军博客
搜索到与相关的文章
编程技术

MapReduce 模式、算法和用例

本文译自MapreducePatterns,Algorithms,andUseCases在这篇文章里总结了几种网上或者论文中常见的MapReduce模式和算法,并系统化的解释了这些技术的不同之处。所有描述性的文字和代码都使用了标准hadoop的MapReduce模型,包括Mappers,Reduces,Combiners,Partitioners,和sorting。如下图所示。基本MapReduce模式计数与求和问题陈述:有许多文档,每个文档都有一些字段组

系统 2019-08-12 09:29:31 2655

Hive

Hive[6] HiveQL 查询

6.1SELECT...FROM语句hive>SELECTname,salaryFROMemployees;--普通查询hive>SELECTe.name,e.salaryFROMemployeese;--也支持别名查询当用户选择的列是集合数据类型时,Hive会使用JSON语法应用于输出:hive>SELECTname,subordinatesFROMemployees;显示JohnDoe["MarySmith","ToddJones"]数组类型的显示hi

系统 2019-08-12 09:27:05 2655

数据库相关

PyQt学习笔记(6)——Actions and Key Sequences

PyQt学习笔记(6)——ActionsandKeySequences_萧萧_新浪博客PyQt学习笔记(6)——ActionsandKeySequences(2010-02-2009:40:24)转载▼标签:pythonpyqt4it分类:Python在Qt中,目前我认为做的最好的两种机制就是:SIGNALandSLOTS和ActionsandKeySequences。ActionsandKeySequence我对他的理解就是各种动作带来的核心一致反应。举

系统 2019-08-12 01:55:45 2655

MySql

.net安装包自动安装Mysql数据库

原文:.net安装包自动安装Mysql数据库在制作.Net安装包的时候,如果项目有用到数据库,怎么能够把数据库打包安装呢?网上已经有很多自动安装SqlServer数据库的例子,但是自动安装mysql的例子似乎不多。本文就介绍一下如何在.Net安装包中自动安装Mysql数据库。最终我们要实现的效果是,部署.Net桌面应用程序时,能够一键自动安装应用程序以及附带的MySql数据库,并初始化数据库。实现步骤如下:1.准备一个干净的MySql安装包mysql本身是

系统 2019-08-12 01:53:18 2655

数据库相关

std::map, std::multimap, std::tr1::unordered

std::map,std::multimap,std::tr1::unordered_map区别-笔记本-博客频道-CSDN.NETstd::map,std::multimap,std::tr1::unordered_map区别分类:C/C++2012-02-2015:25399人阅读评论(0)收藏举报treetablemap和multimap都是基于binarytree的东西,区别是:map中一个key只能存在一个,multimap中则可以存在多个key

系统 2019-08-12 01:51:54 2655

Python

Python 中pandas.read_excel详细介绍

Python中pandas.read_excel详细介绍#coding:utf-8importpandasaspdimportnumpyasnpfilefullpath=r"/home/geeklee/temp/all_gov_file/pol_gov_mon/downloads/1.xls"#filefullpath=r"/home/geeklee/temp/all_gov_file/pol_gov_mon/downloads/26368f3a-ea03

系统 2019-09-27 17:54:57 2654

Python

python读取大文件越来越慢的原因与解决

背景:今天同事写代码,用python读取一个四五百兆的文件,然后做一串逻辑上很直观的处理。结果处理了一天还没有出来结果。问题出在哪里呢?解决:1.同事打印了在不同时间点的时间,在需要的地方插入如下代码:printtime.strftime('%Y-%m-%d%H:%M:%S',time.localtime(time.time()))发现一个规律,执行速度到后面时间越来越长,也就是处理速度越来越慢。2.为什么会越来越慢呢?1)可能原因1,GC的问题,有篇文章

系统 2019-09-27 17:48:26 2654

编程技术

XSS跨站攻击及漏洞原理

什么是XSS(跨站)攻击·XSS(跨站)攻击的概念XSS又叫CSS(CrossSiteScript),跨站脚本攻击。它指的是恶意攻击者往Web页面里插入恶意html代码,当用户浏览该页之时,嵌入其中Web里面的html代码会被执行,从而达到恶意用户的特殊目的。XSS属于被动式的攻击,因为其被动且不好利用,所以许多人常呼略其危害性。而本文主要讲的是利用XSS得到目标服务器的shell。技术虽然是老技术,但是其思路希望对大家有帮助。·跨站攻击的方式跨站攻击有多

系统 2019-08-29 22:51:25 2654

编程技术

杨森翔书法:(孙中山诗.万象阴霾打不开...及其

孙中山诗【2副】:万象阴霾打不开,红羊劫运自相摧。顶天立地奇男子,要把乾坤转过来。项羽诗:力拔山兮气盖世对联【2副】;鹤归辽海逾千岁,枫落吴江又一秋斗方:华夏有天皆丽日,神州无处不春风。杨森翔书法:(孙中山诗.万象阴霾打不开...及其它)

系统 2019-08-12 01:32:51 2654

Linux

Linux学习笔记26——信号量

一信号量的基本概念信号量:它是一个特殊变量,只允许对它进行等待和发送信号这两种操作。假设有一个信号量变量svP(sv):用于等待,如果sv的值大于零,就给它减去1,如果它的值等于零,就挂起该进程的执行。V(sv):用于发送信号,如果有其他进程因等待sv而被挂起,就让它恢复运行,如果没有进程因等待sv而被挂起,就给它加1二信号量的相关函数#include//semctl函数的作用是用来直接控制信号量信息intsemctl(intsem_

系统 2019-08-12 01:32:38 2654