publicListgetSplits(JobContextjob)throwsIOException{longminSize=Math.max(getFormatMinSplitSize(),getMinSplitSize(job));longmaxSize=getMaxSplitSize(job);Listsplits=newArrayList();Listfiles=listStatus(job);for(FileStatus
系统 2019-08-12 09:27:08 2388
最近有部分工作涉及到了Infobright数据仓库,就浏览了一些相关的资料,感觉很受启发。下面写一些感想,如有谬误,还请指正。简单的来讲,Infobright主要有下面的一些优点:1.TB级的数据存储和高效查询。大数据量存储主要依赖自己提供的高速数据加载工具(百G/小时)和高数据压缩比(>10:1),高效查询主要依赖特殊设计的存储结构对查询的优化,但这里优化的效果还取决于数据库结构和查询语句的设计。2.高数据压缩比,号称一般能够达到10:1以上的数据压缩率
系统 2019-08-12 01:53:23 2388
咱花一个下午给自己归纳了下字符编码知识==,在脑子里理理顺当~ASCII:早期的字符集,7位,128个字符,包括大小写a-z字母,0-9数字以及一些控制字符.扩展ASCII:1个字节8位,只用7位不合理.于是第8位用于扩展ASCII字符集,这样就又多了128个字符.于是用着后128个字符来扩展表示如拉丁字母,希腊字母等特殊符号.但问题是欧洲那一票国家很多互相都拥有不相同的特殊字母,一起塞进后128个明显不够,于是代码页出现了.CodePage(代码页):1
系统 2019-08-12 01:53:03 2388
表的别名SELECT列FROM表AS别名列的别名SELECT列AS别名FROM表例:表的别名假设我们有两个表,分别是:"Persons"和"Product_Orders"。我们分别为它们指定别名"p"和"po"现在我们希望列出"JohnAdams"的所有定单SELECTpo.OrderID,p.LastName,p.FirstNameFROMPersonsASp,Product_OrdersASpoWHEREp.LastName='Adams'ANDp.F
系统 2019-08-12 01:52:06 2388
1组合电路的特点方框图组合电路分析方法根据逻辑图写出逻辑表达式化简逻辑表达式列真值表确定输出变量的物理意义描述电路的功能组合电路的设计方法对实际逻辑问题进行抽象,定义输出变量和输入变量根据要实现的逻辑功能列真值表选用门电路类型从真值表列出表达式有效电平组合逻辑电路
系统 2019-08-12 01:32:52 2388
0引言上周被一则新闻震惊到了,《2454万元大奖无人认领!福彩史上第二大弃奖在广东中山产生》,在2019年5月2日开奖的双色球中,广东中山一位彩民博中2454万元,兑奖时间截至2019年7月1日。令人遗憾的是,中奖者最终未现身领奖,2454万元大奖成为弃奖。经中山市福彩中心查证,这是中国福彩史上金额第二大的弃奖。根据《彩票管理条例实施细则》的有关规定,这次的2454万元弃奖奖金将被纳入彩票公益金。一直在为福彩做贡献的我,啥时候能摊上这样的好事啊。于是我用P
系统 2019-09-27 17:56:54 2387
相同点都属于序列类型的数据所谓序列类型的数据,就是说它的每一个元素都可以通过指定一个编号,行话叫做“偏移量”的方式得到,而要想一次得到多个元素,可以使用切片。偏移量从0开始,总元素数减1结束。例如:>>>welcome_str="Welcomeyou">>>welcome_str[0]'W'>>>welcome_str[1]'e'>>>welcome_str[len(welcome_str)-1]'u'>>>welcome_str[:4]'Welc'>>>
系统 2019-09-27 17:56:43 2387
python小技巧记录我发现1、str转bool方法2、python判断文件和文件夹是否存在、创建文件夹3、文件操作4、python字典遍历的几种方法4.1、遍历key值4.2、遍历value值4.3、遍历字典项4.4、遍历字典健值5、Python列表(List)的三种遍历(序号和值)方法6、python字典判断某个Key是否存在我发现好多有用的小技巧其实都不难,但是每次用的时候,我都要去百度,主要是懒得去记,刚好突然有个想法,总结一些实用小技巧,归类整理
系统 2019-09-27 17:56:06 2387
作用域LEGB作用域:变量起作用的范围。LEGB含义解释:L—Local(function)局部作用域;函数内的命名空间,可以通过locals()查看。E—Enclosingfunctionlocals外部嵌套作用域;外部嵌套函数的命名空间(例如closure闭包函数)G—Global(module)全局作用域;函数定义所在模块(.py文件)内的命名空间,可以通过globals()查看。B—Builtin(Python)内置模块作用域;Python内置模块
系统 2019-09-27 17:53:56 2387
目录一,轮询和长轮询二,分析web端微信三,爬虫套路一,轮询和长轮询短轮询的基本思路就是浏览器每隔一段时间向浏览器发送http请求,服务器端在收到请求后,不论是否有数据更新,都直接进行响应。这种方式实现的即时通信,本质上还是浏览器发送请求,服务器接受请求的一个过程,通过让客户端不断的进行请求,使得客户端能够模拟实时地收到服务器端的数据的变化。这种方式的优点是比较简单,易于理解,实现起来也没有什么技术难点。缺点是显而易见的,这种方式由于需要不断的建立http
系统 2019-09-27 17:53:45 2387