一、控制hive任务中的map数:1.通常情况下，作业会通过input的目录产生一个或者多个map任务。主要的决定因素有：input的文件总个数，input的文件大小，集群设置的文件块大小(目前为128M,可在hive中通过setdfs.block.size;命令查看到，该参数不能自定义修改)；2.举例：a)假设input目录下有1个文件a,大小为780M,那么hadoop会将该文件a分隔成7个块（6个128m的块和1个12m的块），从而产生7个map数b
系统 2019-08-12 09:27:24 3040
之前断断续续的在轻博客点点【http://cphmvp.diandian.com/】写下些有关java,爬虫，正则,硬件服务器的一些工作中用到的，比较喜欢点点的域名个性定制，今期想把15个月的爬虫工作学习资料整理下，发现在点点上排版有些蹩脚，特别是代码显示上。寻思了几天，终于找着一个适合it程序猿记录，分享技术的博客。有点迟，但希望还不晚。我是一名90后，在it这个一脚探下去不知道深浅的行业里，待了才刚一年半。在技术上，一直在做各种爬虫，很少用nutch、
系统 2019-08-12 01:54:57 3040
SQLServer版2004下半年度专家榜（揭帖时间为2004年下半年度）2004年下半年度指2004年6月（含）到2004年12月（含）依次为账号、所得专家分、注册时间。这里统计的SQLServer版包括SQL非技术区论坛的得分。zjcxc3165002003年3月pbsql370442001年5月hdhai9451243812003年3月lsxaa211642002年12月netcoder209472001年12月victorycyz158022003
系统 2019-08-12 01:54:36 3040
原文:sqlserver查询所有表的行数的sql语句selectobject_name(id),rowcntfromsysindexeswhereindid<2andobjectproperty(id,'ismsshipped')=0orderbyrowcntdescselecta.name,b.rowsfromsysobjectsainnerjoinsysindexesbona.id=b.idwherea.type='u'andb.indidin(0,1
系统 2019-08-12 01:34:00 3040
1、numpy中empty方法可以创建一个二维数组x=np.empty(shape=[0,4],dtype=int)创建了一个空的四列的二维数组2、添加需要的元素x=np.append(x,[[1,2,3,4]],axis=0)#添加整行元素，axis=1添加整列元素
系统 2019-09-27 17:48:24 3039
“在未来的五年内，Java平台企业版(JavaEE)将不再是主流的标准程序设计模型。SOA的发展是导致这一结果的主要原因之一。”Burton集团高级分析师RichardMonson-Haefel这样预测说。“JavaEE5在复杂性上的失败是预示着Java企业版平台终从企业开发平台领域的统治地位上落败。”它的发展不可避免的效仿以往的一些标准，比如CORBA，正一步一步走向没落。在面对SOA的时候，JavaEE似乎显现出来太多的不合适。针对于这样的预测，来自B
系统 2019-08-29 23:41:18 3039
来兴致了安装了个ubuntu13.04玩一玩linux，遇到了各种菜bi问题。1.如何调出自带的中文输入法安装的时候装个bi直接安装了英文版的。进入系统后，发现找不到中文输入法，蛋疼般地只能用拼音谷歌度娘了几下，甚至连我的破手机都拿出来了，只为了能用中文搜索。英文没学好又想装bi的娃伤不起。不过总算还是找到答案了，在SystemSetting点击LanguageSupport最底下Keyboardinputmethodsystem下拉菜单选中iBus,关闭
系统 2019-08-12 01:32:33 3039
当前标签:KFS分布式文件系统KFS源码阅读与分析（四）：RPC实现机制（KfsClient端）大圆那些事2011-12-2423:35阅读:744评论:0分布式文件系统KFS源码阅读与分析（三）：RPC实现机制（MetaServer端）大圆那些事2011-11-0701:03阅读:937评论:0分布式文件系统KFS源码阅读与分析（二）：MetaServer元数据持久化大圆那些事2011-08-2816:56阅读:1056评论:7分布式文件系统KFS源码阅
系统 2019-08-12 01:31:42 3039
简介文中主要帮助一位小哥实现对圆的任意切分，切分需要从给定点，和给定角度进行切分。现把算法记录如下，需要使用的可以参考，当然比较简单。算法和效果如下。代码importmathimportmatplotlib.pyplotaspltimportnumpyasnp#defreturn_xy_list(alfa,):#passr=11.599xa=-11.599ya=0.645941173792x0=0y0=0alfa=2list_x=[]list_y=[]N=
系统 2019-09-27 17:50:17 3038
《iPhone5和iOS6新特征》iPhone5:1.Newscreensize新的屏幕尺寸分辨率1136×640，326DPI。2.Newsimulator新的模拟器在Xcode4工具上包含了iPhone5模拟器。iOS6：1.FileuploadsandcameraaccesswithMediaCaptureandFileAPI文件上传、支持媒体捕获的摄像头访问以及文件API2.WebAudioAPI网络音频API3.SmartAppBannersfo
系统 2019-08-12 09:29:43 3038
