搜索到与相关的文章
Hadoop

hadoop2.2.0目录结构

一.hadoop2.0的目录结构如下图所示二.bin目录Hadoop最基本的管理脚本和使用脚本所在目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以用这些脚本管理和使用hadoop三.etc目录hadoop配置文件所在的目录,包括core-site.xml、hdfs-site.xml、mapred-site.xml等从hadoop1.0继承而来的配置文件和yarn-site.xml等hadoop2.0新增的文件。.template是模板文件四.in

系统 2019-08-12 09:30:36 3037

Hive

hive优化之------控制hive任务中的map数和reduc

一、控制hive任务中的map数:1.通常情况下,作业会通过input的目录产生一个或者多个map任务。主要的决定因素有:input的文件总个数,input的文件大小,集群设置的文件块大小(目前为128M,可在hive中通过setdfs.block.size;命令查看到,该参数不能自定义修改);2.举例:a)假设input目录下有1个文件a,大小为780M,那么hadoop会将该文件a分隔成7个块(6个128m的块和1个12m的块),从而产生7个map数b

系统 2019-08-12 09:27:24 3037

数据库相关

构建访问AWS的本地命令行环境

并不是所有的EC2的功能,都可以通过基于web的AWSManagementConsole来操作,所以在本地配置一个访问EC2的命令行环境还是很重要的,特别是需要直接在EC2上去构筑服务器环境的时候。AWS一共有三种访问证书,用于不同的目的,命令行环境下需要用到其中两种:Accesskeys:用于基于REST和Query协议的请求X.509certificates:用于基于SOAP协议请求Keypairs:访问EC2实例和保护CloudFront中的内容。搭

系统 2019-08-12 01:33:22 3037

Python

Python音频操作工具PyAudio上手教程详解

​0.引子当需要使用Python处理音频数据时,使用python读取与播放声音必不可少,下面介绍一个好用的处理音频PyAudio工具包。PyAudio是Python开源工具包,由名思义,是提供对语音操作的工具包。提供录音播放处理等功能,可以视作语音领域的OpenCv。1.简介PyAudio为跨平台音频I/O库PortAudio提供Python绑定。使用PyAudio,您可以轻松地使用Python在各种平台上播放和录制音频,例如GNU/Linux,Micro

系统 2019-09-27 17:55:47 3036

IOS

iPhone5和iOS6新特征

《iPhone5和iOS6新特征》iPhone5:1.Newscreensize新的屏幕尺寸分辨率1136×640,326DPI。2.Newsimulator新的模拟器在Xcode4工具上包含了iPhone5模拟器。iOS6:1.FileuploadsandcameraaccesswithMediaCaptureandFileAPI文件上传、支持媒体捕获的摄像头访问以及文件API2.WebAudioAPI网络音频API3.SmartAppBannersfo

系统 2019-08-12 09:29:43 3036

Android

【Android Developers Training】 79. 连接到网

注:本文翻译自Google官方的AndroidDevelopersTraining文档,译者技术一般,由于喜爱安卓而产生了翻译的念头,纯属个人兴趣爱好。原文链接:http://developer.android.com/training/basics/network-ops/connecting.html这节课将会向你展示如何实现一个简单地连接网络的应用。这当中包含了一些创建哪怕是最简单的网络连接应用时需要遵循的最佳实践规范。注意,要执行这节课中所讲的网络

系统 2019-08-12 01:55:00 3036

Oracle

win7下安装Oracle 10G 的成功方法

具体安装过程如下:将oralce10G的安装镜像解压都硬盘,找到\stage\prereq\db\下的refhost.xml文件添加如下内容:再到install目录中找到oraparam.ini文件,添加如下内容:[Windows-6.1-required]#Minimumdisplaycolo

系统 2019-08-12 01:54:16 3036

编程技术

怎查询地址的经纬度

越努力.越幸福.----willingseal.使用地图,查出地址的经度多少?纬度多少?(1)输入你要查询的地址(2)右键(3)显示经纬度-----------------(1)(2)(3)------怎查询地址的经纬度

系统 2019-08-12 01:32:20 3036

Python

数值分析Python实现系列—— 二、逐次超松弛迭代法(SOR)

二、超松弛迭代法(SOR)1.原理:​回顾:​在一般情况下:收敛过慢甚至不收敛的\(B\)与\(f\),经过对系数矩阵\(A\)分裂成\(A=M-N\)的形式,使得迭代公式变为:\(x^{k+1}=(I-M^{-1})Ax^{k}+M^{-1}f\)​雅克比迭代法选取:现将\(A\)如下分解\(A=D-L-U\),\(D\)为对角阵,\(L\)为下三角阵,\(U\)为上三角阵,取\(M\equivD\),取\(N\equivL+U\),​在这一章中我们选取

系统 2019-09-27 17:57:35 3035

Python

python函数参数(必须参数、可变参数、关键字参数)

#python中的函数定义,使用和传参###-------------------必要参数-------------------------------------必要参数,即函数调用时必须要传的参数,#下面进行举例说明defhelloWorld(a):print('输出:hello')if__name__=='__main__':helloWorld("aaa")##必须要有参数##------------默认参数--------------------

系统 2019-09-27 17:55:02 3035