编程技术 - 军军小站|张军博客
Hive

Hive学习笔记

本文转载自:http://blog.csdn.net/haojun186/article/details/79775651.HIVE结构Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive定义了简单的类SQL查询语言,称为QL,它允许熟悉SQL的用户查询数据。同时,这个语言也允许熟悉MapReduce开发者的开发自定义的m

系统 2019-08-12 09:27:09 4396

redis

Walking on the path of Redis --- Redis confi

废话开篇Redis的安装是非常简单易操作的,但是配置就有点复杂了,要想得到高性能的Redis数据服务,深入了解下如何配置是很重要的。配置详解下面是主要的参数及说明,至于如何配置才能最优,目前还不清楚,因为刚刚迈出了几步而已。daemonize是否以后台进程运行,默认为nopidfile如以后台进程运行,则需指定一个pid,默认为/var/run/redis.pidbind绑定主机IP,默认值为127.0.0.1(注释)port监听端口,默认为6379tim

系统 2019-08-12 09:26:44 4392

Hive

hiveQL学习和hive常用操作

Hive服务Hive外壳环境是可以使用hive命令来运行的一项服务。可以在运行时使用-service选项指明要使用哪种服务。键入hive-servicehelp可以获得可用服务列表。下面介绍最有用的一些服务。cliHive的命令行接口(外壳环境)。这是默认的服务。hiveserver让Hive以提供Trift服务的服务器形式运行,允许用不同语言编写的客户端进行访问。使用Thrift,JDBC和ODBC连接器的客户端需要运行Hive服务器来和Hive进行通信

系统 2019-08-29 22:08:57 4389

Python

用Python实现BP神经网络(附代码)

用Python实现出来的机器学习算法都是什么样子呢?前两期线性回归及逻辑回归项目已发布(见文末链接),今天来讲讲BP神经网络。BP神经网络全部代码https://github.com/lawlite19/MachineLearning_Python/blob/master/NeuralNetwok/NeuralNetwork.py神经网络model先介绍个三层的神经网络,如下图所示输入层(inputlayer)有三个units(为补上的bias,通常设为1

系统 2019-09-27 17:55:52 4384

Python

python使用matplotlib绘图使刻度线向内

python使用matplotlib绘图时使刻度线向内刻度向外的程序importnumpyasnpimportmatplotlib.pyplotaspltnum=np.arange(10).reshape(2,5)##print(num[0])plt.plot(num[0],num[1])plt.show()结果:刻度向内的程序importnumpyasnpimportmatplotlib.pyplotaspltnum=np.arange(10).resh

系统 2019-09-27 17:51:21 4382

Python

以股票RSI指标为例,学习Python发送邮件功能(含RSI指标确定卖点策略)

本人之前写过若干“给程序员加财商”的系列文,目的是通过股票案例讲述Python知识点,让大家在学习Python的同时还能掌握相关的股票知识,所谓一举两得。在之前的系列文里,大家能看到K线,均线,成交量的案例,在本文里,大家能看到通过RSI案例讲述Python邮件编程的知识点,在后继系列文里,大家还能看到MACD,BIAS,KDJ等指标相关案例。1RSI指标的原理和算法描述相对强弱指标(RSI)是通过比较某个时段内单股价格的涨跌幅度来判断多空双方的强弱程度,

系统 2019-09-27 17:51:11 4382

IOS

【一步一步学IOS5 】 如何在导航界面隐藏TabBar

前面的例子中,我们开发了一个tabbar(选项卡栏)应用程序。我们将导航控制器嵌入在tabbar控制器内。因此,当用户轻拍任一菜单项时,导航控制器切换到详细视图。但是tabbar在详细视图时,仍然占用了一些屏幕空间,我们需要隐藏tabbar,释放更多的屏幕空间。1.UIViewController类的hidesBottomBarWhenPushed属性在UIViewController中有一个属性:hidesBottomBarWhenPushed,它是一个

系统 2019-08-12 09:30:35 4379

IOS

【一步一步学IOS5 】 Storyboard 在视图控制器

在前面例子中,我们介绍了Storyboards是Xcode中设计用户界面的友好功能。首先,回顾一下我们已经完成的工作。-将一个正常的视图控制器嵌入到导航控制器中-创建了一个表视图,并填充了菜单列表-使用联线从一个视图控制器切换到另一个视图控制器我们目前还没有实现详细视图,该视图目前显示一个静态的标签。我们将继续完成这个项目。完善这个应用程序。1.赋值视图控制器类在前面,我们简单创建了一个视图控制器,在Storyboard编辑器中,作为一个菜谱的详细视图,视

系统 2019-08-12 09:30:35 4379

Jquery

jQuery插件开发 - 其实很简单

【前言】jQuery已经被广泛使用,凭借其简洁的API,对DOM强大的操控性,易扩展性越来越受到web开发人员的喜爱,我在社区也发布了很多的jQuery插件,经常有人询问一些技巧,因此干脆写这么一篇文章给各位jQuery爱好者,算是抛砖引玉吧。【基础】a)样式很多人会认为样式是个很复杂的东西,需要沉着冷静的心态加上非凡的审美观才能设计出赏心悦目的UI,抛开图片设计不说,其实css也就是那么些属性:position,margin,padding,width,

系统 2019-08-29 22:25:31 4373

redis

关于redis、memcache、mongoDB 的对比

从以下几个维度,对redis、memcache、mongoDB做了对比,欢迎拍砖1、性能都比较高,性能对我们来说应该都不是瓶颈总体来讲,TPS方面redis和memcache差不多,要大于mongodb2、操作的便利性memcache数据结构单一redis丰富一些,数据操作方面,redis更好一些,较少的网络IO次数mongodb支持丰富的数据表达,索引,最类似关系型数据库,支持的查询语言非常丰富3、内存空间的大小和数据量的大小redis在2.0版本后增加

系统 2019-08-12 01:31:51 4370

Spark

spark的action和transformations汇集

汇总了Spark支持的Transformations和Actions用于备忘!參考http://spark.apache.org/docs/latest/programming-guide.html#transformations若想看中文的,能够參考其他博客(没这里全面):http://blog.csdn.net/egraldloi/article/details/16343733spark的action和transformations汇集

系统 2019-08-12 01:32:19 4363

Jquery

jQuery选择器大全(48个代码片段+21幅图演示)

jQuery选择器大全(48个代码片段+21幅图演示)选择器是jQuery最基础的东西,本文中列举的选择器基本上囊括了所有的jQuery选择器,也许各位通过这篇文章能够加深对jQuery选择器的理解,它们本身用法就非常简单,我更希望的是它能够提升个人编写jQuery代码的效率。本文配合截图、代码和简单的概括对所有jQuery选择器进行了介绍,也列举出了一些需要注意和区分的地方。本文已经同步至我的个人博客站点:积累吧|jQuery选择器大全(48个代码片段+

系统 2019-08-29 23:08:49 4357

PHP

php memcache总结

1.简介memcache模块是一个高效的守护进程,提供用于内存缓存的过程式程序和面向对象的方便的接口,特别是对于设计动态web程序时减少对数据库的访问。memcache也提供用于通信对话(session_handler)的处理。更多Memcache模块相关信息可以到http://www.danga.com/memcached/查阅。1.1.memcache在php.ini中的配置项列表memcache在php.ini中的配置项列表名称默认值是否可变改变日志

系统 2019-08-12 09:26:49 4356

redis

Redis bio

还是一个很小的模块。bio就是backgroundio的意思,既然要background,就要创建线程,创建几个线程呢?有几种类型的io,就创建几个线程。同一种类型的job需要排队,所以存放各自的工作链表里面。redis目前有两种类型的job:一个是closefiledescriptor,另一个是aofsync。线程的堆栈默认设为4M,每个线程运行开始时还要把SIG_ALRM(定时器信号)block掉,保证watchdog发出的信号只有主线程接收到。介绍下

系统 2019-08-12 01:53:00 4356

PHP

使用Mason和PHP生成饭否图片插件

饭否的图片插件可用于论坛,博客,将用户的信息和一些最新动态用图片的形式表现出来。我们如果需要自行开发此功能的话,需要设置某种格式(或某个地址)的图片采用脚本来处理。在Perl中的话例如可以使用Apache的LocationMatch或者FilesMatch指令来进行设置,让某个Perl模块来进行处理。如果使用Mason的话,更为简单,不需要修改服务器,只需利用dhandler的特性,就可以让指定的脚本来处理。基本流程如下:主要代码如下:my$uri=$r-

系统 2019-08-29 22:49:43 4354