编程技术 - 军军小站|张军博客
Hadoop

从Hadoop框架与MapReduce模式中谈海量数据处理

前言几周前,当我最初听到,以致后来初次接触Hadoop与MapReduce这两个东西,我便稍显兴奋,觉得它们很是神秘,而神秘的东西常能勾起我的兴趣,在看过介绍它们的文章或论文之后,觉得Hadoop是一项富有趣味和挑战性的技术,且它还牵扯到了一个我更加感兴趣的话题:海量数据处理。由此,最近凡是空闲时,便在看“Hadoop”,“MapReduce”“海量数据处理”这方面的论文。但在看论文的过程中,总觉得那些论文都是浅尝辄止,常常看的很不过瘾,总是一个东西刚要讲

系统 2019-08-12 09:29:27 2945

Java

java程序调用python程序输出python结果(无参)

具体代码java代码@TestpublicvoidcontextLoads()throwsIOException,InterruptedException{Processpr=Runtime.getRuntime().exec("pythonC:\\Users\\tianyong\\Desktop\\222.py");BufferedReaderin=newBufferedReader(newInputStreamReader(pr.getInputStr

系统 2019-09-27 17:51:49 2944

Android

三星给中国电信定制的支持Android 2.0新机i899

三星正式对外发布了他们在中国地区的有一款Android手机——三星i899。据悉I899是三星在华发布的首款支持CDMA2000网络的Android产品。该机在硬件配置方面也颇为强大,3.2英寸AMOLED触摸屏幕、320×480分辨率、1440毫安电池以及300万像素摄像头。另外这款手机还只支持WiFi和WAPI网络的自由切换,另外三星自家的800MHz处理器以及512MB内存还是给这款手机提供了强大的性能保证。虽然官方并没有给出这款手机的Android

系统 2019-08-29 23:40:15 2944

Java

java解惑之无穷大和NaN

1、i==i+1一个数字永远不会等于它自己加1?Java强制要求使用IEEE754浮点数算术运算[IEEE754],它可以让你用一个double或float来表示无穷大。正如我们在学校里面学到的,无穷大加1还是无穷大。你可以用任何被计算为无穷大的浮点算术表达式来初始化i,例如:doublei=1.0/0.0;不过,你最好是能够利用标准类库为你提供的常量:doublei=Double.POSITIVE_INFINITY;事实上,你不必将i初始化为无穷大以确保

系统 2019-08-29 22:51:27 2944

Python

Python实现语音识别:百度baidu-Aip

百度语音识别通过RESTAPI的方式给开发者提供一个通用的HTTP接口。上传需要完整的录音文件,录音文件时长不超过60s。官方文档库:http://ai.baidu.com/docs#/ASR-Online-Python-SDK/top调用方式开发文档写可以两种方式调用。可以下载使用SDK不下载使用SDK:根据文档组装url获取token,处理本地音频以JSON格式POST到百度语音识别服务器,获得返回结果语音格式格式支持pcm(不压缩)wav(不压缩,p

系统 2019-09-27 17:55:42 2942

编程技术

想统计下有多少人是使用idea做开发的。

今天把idea8下载下来试了试。感觉非常不错。确实是非常人性化。每个插件都比eclipse中的强不少而且支持大部分流行的框架。Spring,JbossSeam,Groovy/Grails,Ruby/RoR,Flex,Maven,GWT,JSFHIBERNATE,STRUTS2等等。真的是全能呀。Eclipse的用户如果还没有尝试下idea的话。赶紧去试试。你肯定会喜欢的。有30天的试用。希望在这30天内会有sn出来。有用idea的兄弟吗?另外给个运行参数,

系统 2019-08-29 23:37:40 2942

编程技术

开源XML处理包:Digester

一、Digester简介JakartaCommonsDigester是Apache小组的Jakarta项目下的子项目,是目前比较流行的、开源的XML文件处理包。目前最新版本是2.0版本。许多应用都需要处理XML格式的数据,这时Digester是个很好的选择。Digeste提供事件驱动管理器处理XML文件。开发者可以使用熟悉简单的API,以SAX方式解析XML。提供开发友好的SAX事件接口,使开发者只需集中注意力解决处理过程就可以了。使用Digester,需

系统 2019-08-29 22:23:35 2942

编程技术

用R绘制网格

1.用grid包,下面展示其用法。library(grid)dat<-data.frame(x=rep(seq(0,0.8,1/5),5),y=rep(seq(0,0.8,1/5),each=5),val=rnorm(25,20,5))#makingrelativevalues(%)tobeusedforcolor-gradiationinplotdat$rel<-100*dat$val/max(dat$val)#creatinggrey-tonesrel

系统 2019-08-12 09:30:30 2942

IOS

为什么不要在android或者ios上直连mysql或者sql

很多同学都有直连这些数据库的想法,假设我说了下面二个问题之后你还想直连,那我也没办法数据库是一个服务端最重要的部分,也是最脆弱的部分,更是最敏感的部分假设直连会造成例如以下问题1.安全问题,你的连接数据库的账号password暴露给了client,这样非常easy被抓到,不管是android的反编译,还是抓包,都非常easy得到这个信息,并且假设须要直连,数据库势必要监听0.0.0.0,,这样不论什么人都能够尝试你的数据库,多么可怕的一件事2.性能问题,我

系统 2019-08-12 01:32:04 2942

Javascript

前端技术系列课程(No.4) – 深入学习JavaScript

作为系列课程的第三讲,函谷担任此课的讲师,风趣幽默的讲解、充足的课堂演示,带来非常不错的课堂体验,本次课程主要focus在浏览器渲染机制相关的知识点,包括常见的浏览器兼容性问题,浏览器渲染和性能优化之间的关系,布局的多样性和适用范围,前端调试工具和各种抓包利器,本次课程ppt参照了之前沉鱼同学的课件。http://www.slideshare.net/lijing00333/ss-12511889前端技术系列课程(No.4)–深入学习JavaScript语

系统 2019-08-29 22:08:22 2941

Java

Java规则引擎-Drools

InfoQ发布了一个关于规则引擎的介绍Real-WorldRuleEngines,原文http://www.infoq.com/articles/Rule-EnginesONJava上也有两篇文章:GiveYourBusinessLogicaFrameworkwithDroolshttp://www.onjava.com/lpt/a/6093UsingDroolsinYourEnterpriseJavaApplicationhttp://www.onjav

系统 2019-08-12 01:31:43 2941

Python

用python的matplotlib和numpy库绘制股票K线均线和成交量

在用python的matplotlib和numpy库绘制股票K线均线的整合效果(含从网络接口爬取数据和验证交易策略代码)一文里,我讲述了通过爬虫接口得到股票数据并绘制出K线均线图形的方式,在本文里,将在此基础上再引入成交量效果图,并结合量价理论,给出并验证一些交易策略。1成交量对量化分析的意义美国的股市分析家葛兰碧(JoeGranville)在他所著的《股票市场指标》一书里提出著名的“量价理论”。“量价理论”的核心思想是,任何对股价的分析,如果离开了对成交

系统 2019-09-27 17:56:02 2940

Javascript

Python下载懒人图库JavaScript特效

这是一个简单的Python脚本,主要从懒人图库下载JavaScript特效模板,在脚本中使用了gevent这个第三方库,使用的时候需要先安装。#!/usr/bin/python#-*-coding:utf-8-*-importurllib,os,sysimportgevent,refromgeventimportmonkeyfrombs4importBeautifulSoupgevent.monkey.patch_socket()'''Descriptio

系统 2019-09-27 17:37:54 2940