搜索到与相关的文章
Hadoop

hadoop2.2.0目录结构

一.hadoop2.0的目录结构如下图所示二.bin目录Hadoop最基本的管理脚本和使用脚本所在目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以用这些脚本管理和使用hadoop三.etc目录hadoop配置文件所在的目录,包括core-site.xml、hdfs-site.xml、mapred-site.xml等从hadoop1.0继承而来的配置文件和yarn-site.xml等hadoop2.0新增的文件。.template是模板文件四.in

系统 2019-08-12 09:30:36 3040

Hive

hive优化之------控制hive任务中的map数和reduc

一、控制hive任务中的map数:1.通常情况下,作业会通过input的目录产生一个或者多个map任务。主要的决定因素有:input的文件总个数,input的文件大小,集群设置的文件块大小(目前为128M,可在hive中通过setdfs.block.size;命令查看到,该参数不能自定义修改);2.举例:a)假设input目录下有1个文件a,大小为780M,那么hadoop会将该文件a分隔成7个块(6个128m的块和1个12m的块),从而产生7个map数b

系统 2019-08-12 09:27:24 3040

数据库相关

检索 COM 类工厂中 CLSID 为 {} 的组件时失败,

当程序运行到这句时出现下面的错误:检索COM类工厂中CLSID为{000209FF-0000-0000-C000-000000000046}的组件时失败,原因是出现以下错误:80070005。解决方法一:控制面板-》管理工具-》组件服务-》计算机-》我的电脑-》DCom配置-》找到MicrosoftWord文档之后单击属性打开此应用程序的属性对话框。2.单击标识选项卡,然后选择交互式用户。3.单击"安全"选项卡,分别在"启动和激活权限"和"访问权限"组中选

系统 2019-08-12 01:53:19 3040

编程技术

怎查询地址的经纬度

越努力.越幸福.----willingseal.使用地图,查出地址的经度多少?纬度多少?(1)输入你要查询的地址(2)右键(3)显示经纬度-----------------(1)(2)(3)------怎查询地址的经纬度

系统 2019-08-12 01:32:20 3040

Python

数值分析Python实现系列—— 二、逐次超松弛迭代法(SOR)

二、超松弛迭代法(SOR)1.原理:​回顾:​在一般情况下:收敛过慢甚至不收敛的\(B\)与\(f\),经过对系数矩阵\(A\)分裂成\(A=M-N\)的形式,使得迭代公式变为:\(x^{k+1}=(I-M^{-1})Ax^{k}+M^{-1}f\)​雅克比迭代法选取:现将\(A\)如下分解\(A=D-L-U\),\(D\)为对角阵,\(L\)为下三角阵,\(U\)为上三角阵,取\(M\equivD\),取\(N\equivL+U\),​在这一章中我们选取

系统 2019-09-27 17:57:35 3039

Python

python中向二维数组中添加整行或者增列元素

1、numpy中empty方法可以创建一个二维数组x=np.empty(shape=[0,4],dtype=int)创建了一个空的四列的二维数组2、添加需要的元素x=np.append(x,[[1,2,3,4]],axis=0)#添加整行元素,axis=1添加整列元素

系统 2019-09-27 17:48:24 3039

编程技术

搜狐新闻表情出现怪异现象

使用Firefox3.6.3,打开一篇sohu的新闻,比如http://news.sohu.com/20100612/n272744777.shtml点击文章下面的新闻表情,如果新闻表情有的没人点击过,也就是点击数为0,则会出现怪异现象,效果如下图所示,很明显,这应当是程序兼容性或者浏览器的Bug导致的,只有Firefox才出现此问题,其他浏览器则不会出现此问题,希望sohu的人进行改正吧。如图:搜狐新闻表情出现怪异现象

系统 2019-08-29 22:18:56 3039

Python

Sublime Text2配置python环境

1.下载python并安装地址:https://www.python.org/downloads/2.下载SublimeText2并安装地址:http://www.sublimetext.com/3.安装插件PackageControl在Sublime里直接安装附加插件的包管理器。这是唯一一个你必须手动安装的插件。这边列出的其他所有插件都可以通过PackageControl来安装。也可以通过它来更新已安装过的插件。简单得想做是Sublimepackages

系统 2019-08-12 09:27:37 3039

数据库相关

博客园 I'm coming

之前断断续续的在轻博客点点【http://cphmvp.diandian.com/】写下些有关java,爬虫,正则,硬件服务器的一些工作中用到的,比较喜欢点点的域名个性定制,今期想把15个月的爬虫工作学习资料整理下,发现在点点上排版有些蹩脚,特别是代码显示上。寻思了几天,终于找着一个适合it程序猿记录,分享技术的博客。有点迟,但希望还不晚。我是一名90后,在it这个一脚探下去不知道深浅的行业里,待了才刚一年半。在技术上,一直在做各种爬虫,很少用nutch、

系统 2019-08-12 01:54:57 3039

Python

python函数参数(必须参数、可变参数、关键字参数)

#python中的函数定义,使用和传参###-------------------必要参数-------------------------------------必要参数,即函数调用时必须要传的参数,#下面进行举例说明defhelloWorld(a):print('输出:hello')if__name__=='__main__':helloWorld("aaa")##必须要有参数##------------默认参数--------------------

系统 2019-09-27 17:55:02 3038