Hadoop

【Hadoop】利用MultipleOutputs,MultiOutputFor

这是小D第一篇博客,有什么错误还请各位指正。小D也是刚接触Hadoop,因为在淘宝实习,有很多算法要在分布式环境下实现,所以这几天一直在看Hadoop,边用边学。最近实现的一个算法需要reduce输出很多参数,每个参数的格式不一样,而且要做为下一次mapreduce的输入,大家都知道Hadoop的分布式操作系统HFS是以目录为节点读取文件的,每个reduce输出一个分片,所以必须把要输出的文件根据类型的不同输出到不同的目录中去。因为淘宝还在用Hadoop0

系统 2019-08-12 09:29:27 3201

Hive

hive实战

1.安装hive2.hive实战3.hive存储模型4.深入hql查询语言5.参考资料及代码下载<1>.安装hive下载hive,下载地址http://mirror.bjtu.edu.cn/apache//hive/,解压该文件:xuqiang@ubuntu:~/hadoop/src/hive$tarzxvfhive-0.7.0-bin.tar.gz设置环境变量:xuqiang@ubuntu:~/hadoop/src/hive$cdhive-0.7.0-b

系统 2019-08-12 01:33:29 3200

编程技术

怎样加入马云,马化腾,李彦宏的微信

让马化腾出如今你的微信聊天里面首先声明不是PS,我不会PS的,这是程序截图:例如以下图:程序源码:http://git.oschina.net/LittleDY/isWeiXin我在他的基础上,又一次设计了图片和聊天记录。图片来自百度百科,但愿没有侵权,若有侵权行为,请及时回复,我能够马上删除。合理使用,仅供參考怎样加入马云,马化腾,李彦宏的微信

系统 2019-08-12 01:33:16 3200

Java

Java规则引擎-Drools

InfoQ发布了一个关于规则引擎的介绍Real-WorldRuleEngines,原文http://www.infoq.com/articles/Rule-EnginesONJava上也有两篇文章:GiveYourBusinessLogicaFrameworkwithDroolshttp://www.onjava.com/lpt/a/6093UsingDroolsinYourEnterpriseJavaApplicationhttp://www.onjav

系统 2019-08-12 01:31:43 3200

编程技术

构件图(Component Diagram)—UML图(八)

构件图是显示代码自身结构的实现级别的图表。构件图由诸如源码文件、二进制代码文件、可运行文件或动态链接库(DLL)这种构件构成,并通过依赖关系相连接以下这张图介绍了构件图的基本内容:以下这张图是个构件图的实例:构件图(ComponentDiagram)—UML图(八)

系统 2019-08-12 01:32:23 3199

Java

ChiMerge算法 (java)

韩家炜数据挖掘概念与技术第三版习题3.12取鸢尾花数据集iris.data作为待离散化的数据集合,使用ChiMerge算法,对四个数值属性进行离散化,对四个属性进行区间合并,最终合并区间个数剩下为6个即停:即max_interval=6。一、样本数据iris.data数据形式为:前面4列是属性,最后一列是数据类名,5.1,3.5,1.4,0.2,Iris-setosa4.9,3.0,1.4,0.2,Iris-setosa4.7,3.2,1.3,0.2,Ir

系统 2019-08-12 01:54:35 3198

ASP.NET

[ASP.NET] Session 详解

本文仅代表作者个人观点,正确与否请读者自行研究!阅读本文章之前的准备阅读本文章前,需要读者对以下知识有所了解。否则,阅读过程中会在相应的内容上遇到不同程度的问题。懂得ASP/ASP.NET编程了解ASP/ASP.NET的Session模型了解ASP.NETWeb应用程序模型了解ASP.NETWeb应用程序配置文件Web.config的作用、意义及使用方法了解InternetInformationServices(以下简称IIS)的基本使用方法了解如何在Mi

系统 2019-08-29 23:51:37 3197

redis

Redis(二) 扩展

事务multi...exec之间的操作先进入等待队列,到exec时一起执行事物的所有操作结果都是一起返回的,所以前一条指令的结果无法作为后一条指令的参数其中的指令有语法错误时,都不执行;有“类型不匹配”等逻辑错误时,只执行对的指令;没有回滚watch监控一个或多个key一旦监控的键值有修改,其后的事务就不执行监控范围:从开始监控到事务执行之前(实际上是从watch到exec,但是由于multi...exec之间的指令是在exec这个点一起执行的,所以看上去

系统 2019-08-12 01:53:38 3197

Javascript

用JavaScript(js)对时间格式化

用JavaScript(js)对时间格式化可以说是Web项目中不可或缺的一个Javascript类库,它可以帮助你快速的解决客户端编程的许多问题,下面贴出一个用js格式化时间的方法。

系统 2019-08-29 22:43:41 3196

编程技术

UITableView 系列三 :分类显示和改变外观 (实

1.分类显示sections在之前的文章UITableView的资料设定方式一文中,已经示范如何在UITableView中设定所要显示的资料,以及分别显示这些资料的细节,但是如果资料比数太多时该怎么办?你可以参考本篇文章的做法,将资料做分类的处理,并且建立快速索引,让使用者能以最短的时间找到所需要的资料。资料分类的概念动态表格的内容多半是存放在阵列当中方便资料的存取,如果你有好几类不同比的资料,你可以将这些资料分别存放在不同的阵列里,最后再使用一个NSMu

系统 2019-08-29 22:01:25 3196

编程技术

多图:ISDN原理及实例分析

ISDN历史ISDN(集成服务数字网络)是一种旨在利用标准模拟电话系统中使用的普通铜线取代模拟连接的数字电话标准。这个标准最初是作为国际电信联盟(ITU)1984年红皮书中的一个建议。不过,在1992年之前,国际电信联盟称作国际电报电话咨询委员会(CCITT)。ITU负责开发这个行业内国际标准的建议。开发ISDN是为了提供语音和数据的数字传输,提供比公共交换电话网络(PSTN)上的语音和数据通讯更好的质量和更快的速度。了解数字协议有两种类型的ISDN信道:

系统 2019-08-29 23:20:30 3195

Javascript

Javascript模版引擎简介

回顾Micro-Templating出自JohnResig2008年的一片文章,以及其经典实现://SimpleJavaScriptTemplating//JohnResig-http://ejohn.org/-MITLicensed(function(){varcache={};this.tmpl=functiontmpl(str,data){//Figureoutifwe'regettingatemplate,orifweneedto//loadthe

系统 2019-08-12 01:33:03 3195

编程技术

[技术分享-RMS] MAC office 不能使用 IRM 功能

MACoffice在使用过程中,会需要一些限制,在目前的MACoffice版本中,MACoffice不支持WindowsLiveID,不支持RMS的外部URL的外网发布。另外如果您按照technet上的文档http://technet.microsoft.com/en-us/library/cc753056.aspx,启用了WindowsliveID支持,并把licensing文件夹设置为匿名访问,MACoffice也可能遇到问题,这个问题和MACoffi

系统 2019-08-12 09:30:11 3194