转自:http://www.tech126.com/hadoop-lzo/自从Hadoop集群搭建以来,我们一直使用的是Gzip进行压缩当时,我对gzip压缩过的文件和原始的log文件分别跑MapReduce测试,最终执行速度基本差不多而且Hadoop原生支持Gzip解压,所以,当时就直接采用了Gzip压缩的方式关于Lzo压缩,twitter有一篇文章,介绍的比较详细,见这里:Lzo压缩相比Gzip压缩,有如下特点:压缩解压的速度很快Lzo压缩是基于Blo
系统 2019-08-12 09:29:35 3118
Hadoop简介:一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(HadoopDistributedFileSystem),简称HDFS。HDFS有着高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上。而且它提供高传输率(highthroughput)来访问应用程序的数据,适合那些有着超大数据集(largedat
系统 2019-08-12 09:27:11 3118
今天发现了一个错误:CouldnotexecuteJDBCbatchupdate最后发现原因是SQL语句长度大于1M,而我机器上的mysql是默认设置,也就是说mysql通讯的数据包大小设置是1M,这就造成sql语句执行失败。于是把mysql的配置文件(my.ini)中的max_allowed_packet=6M变大,问题就解决了linux下:sudogedit/etc/mysql/my.cnfmysqlsql语句最大长度设置方法
系统 2019-08-12 01:54:40 3118
1.安装http://dev.mysql.com/downloads/tools/workbench/选择合适的,下载(以Ubuntu为例)cd到下载目录,然后sudodpkg-iworkbench.deb有依赖关系未解决的话,sudoapt-get-finstall2.初级教程百度文库http://wenku.baidu.com/link?url=SfWJxUMd-mQAB7uHoo2fUsowkKoGRv1_B4gSkiB2lcaZ36UG7lHunw
系统 2019-08-12 01:53:02 3118
Asp.NETMVC5高级编程第5版.pdf中有解决方法:用NUGET程序包管理器控制台安装下面这两个文件Install-PackagejQuery–version1.10.2Install-PackageMicrosoft.jQuery.Unobtrusive.Ajax–version3.0.0NUGET程序包管理器控制打开方法:MVC5新建项目里不包含jquery.unobtrusive-ajax.js(MVC5异步表单的问题)解决方法
系统 2019-08-12 01:33:22 3118
1、无法获取libncurses5-dev的解决办法解决办法(更新源)使用命令为sudogedit/etc/apt/sources.list将/etc/apt/sources.list的内容改为debhttp://ubuntu.cn99.com/ubuntu/hardymainrestricteduniversemultiversedebhttp://ubuntu.cn99.com/ubuntu/hardy-securitymainrestrictedun
系统 2019-08-29 22:58:45 3117
Activity状态:①当一个Activity在屏幕的最上层时(对堆栈的最顶端),它就是属于active或者running的状态②如果一个Activity失去焦点(focus)但还看得到它的画面(比如:一个新的Activity画面并不是全屏幕或者它是一个半透明的情况),那失去焦点的Activity则处在paused的状态。像这个失去焦点的Activity它还是完全活着的,并没有消失。(活着的意思是指,Activity自己本身所有的状态及数据都还是存在的,也
系统 2019-08-29 22:29:54 3117
在2007年8月5日(日)15:00所做的修订版本windows批处理程序中的pause命令可以实现“按任意键继续”的效果,要在shell中实现这一功能,可以借助read。注意:注意不是所有的shell提供的read都支持本文介绍的方法。目前本文已确定适用于bash。简单实现你可能还没注意到read的强大功能,其实只要用下面的代码,就可以实现简单的"pause"。read-n1-p"Pressanykeytocontinue..."但它有明显的不足:如果用
系统 2019-08-29 22:15:58 3117
字符串类型是Redis中最为基础的数据存储类型,它在Redis中是二进制安全的,这便意味着该类型可以接受任何格式的数据,如JPEG图像数据或Json对象描述信息等。在Redis中字符串类型的Value最多可以容纳的数据长度是512M。1.SET/GET/APPEND/STRLEN:/>redis-cli#执行Redis客户端工具。redis127.0.0.1:6379>existsmykey#判断该键是否存在,存在返回1,否则返回0。(integer)0r
系统 2019-08-12 01:53:25 3117
OpenCascadeBRepFormatDescriptioneryar@163.com摘要Abstract:本文结合OpenCascade的BRep格式描述文档和源程序,对BRep格式进行分析,详细说明BRep的数据组织形式。结合源程序,可以对OpenCascade中ModelingData模块中的模型数据结构进行理解。关键字KeyWords:OpenCascade,BRepFormat,ModelingData一、引言IntroductionOpen
系统 2019-08-12 01:32:08 3117