最近，我加入了Cloudera，在这之前，我在计算生物学/基因组学上已经工作了差不多10年。我的分析工作主要是利用Python语言和它很棒的科学计算栈来进行的。但ApacheHadoop的生态系统大部分都是用Java来实现的，也是为Java准备的，这让我很恼火。所以，我的头等大事变成了寻找一些Python可以用的Hadoop框架。在这篇文章里，我会把我个人对这些框架的一些无关科学的看法写下来，这些框架包括:Hadoop流mrjobdumbohadoopyp
系统 2019-09-27 17:48:52 2045
配置文件配置文件[]中为section命名，幸运28平台搭建q<277.03.4.83.6>section的命名可以包含空格，每个section下面以键值对的方式保存配置内容，在读取配置时键值对全部解析为字符串，因此在配置时无需为字符串添加引号settings.conf文件定义[mysqlsettings]host=10.250.218.51port=3306username=adminpassword=admin123coding=utf8[oracle
系统 2019-09-27 17:48:43 2045
该方是基于uiautomator2如下版本进行验证的：PSC:\windows\system32>pipshowuiautomator2Name:uiautomator2Version:1.2.2Summary:PythonWrapperforAndroidUiAutomator2testtoolHome-page:https://github.com/codeskyblue/uiautomator2Author:codeskyblueAuthor-ema
系统 2019-09-27 17:48:27 2045
#money=int(input('你有多少钱?'))#ifmoney>50:#print('打车回家')#b=input('到家了吗?')#ifb=='到家了':#print('我到家了阿')#else:#pass#please=input('你是男的还是女的?')#ifplease=='男的'orplease=='男':#print('你走吧')#elifplease=='美女':#age=int(input("今年多大拉？"))#ifint(age)
系统 2019-09-27 17:48:20 2045
一数据结构和GIL1queue标准库queue模块，提供FIFO的queue、LIFO的队列，优先队列Queue类是线程安全的，适用于多线程间安全的交换数据，内部使用了Lock和Condition为什么说容器的大小不准确，其原因是如果不加锁，是不可能获取到准确的大小的，因为你刚读取了一个大小，还没取走，有可能被就被其他线程修改了，queue类的size虽然加了锁，但是依然不能保证立即get，put就能成功，因为读取大小和get,put方法是分来的。2GIL
系统 2019-09-27 17:48:10 2045
使用装python饰器做缓存装饰器在之前的文章中有讲过，这里主要是说了装饰器的用法和应该怎么理解。这片文章给出一片补充：主要说在缓存方面的应用。在此之前呢，需要补充一些知识点：就是python查找变量的顺序是什么？答案就是LEGB原则：也就是`Local->Enclosed->Global->Built-in`也就是先在局部作用域内(例如函数内)进行查找，然后在[闭包]1内查找，接下来分别是全局作用域和内置的保留名称注意：闭包内的变量，不能改变，但是对于列
系统 2019-09-27 17:47:18 2045
读取一个已经保存了的字典f=open('dict_th','r')a=f.read()dict_hi=eval(a)f.close()保存一个字典dict={}list1=[]list2=[]forlineinlines:line=line.strip()if">"inline:list1.append(line)else:list2.append(line)foriinrange():dict[list1[i]]=list2[i]f6=open("dic
系统 2019-09-27 17:46:38 2045
多线程类似于同时执行多个不同程序，多线程运行有如下优点：使用线程可以把占据长时间的程序中的任务放到后台去处理。用户界面可以更加吸引人，比如用户点击了一个按钮去触发某些事件的处理，可以弹出一个进度条来显示处理的进度。程序的运行速度可能加快。在一些等待的任务实现上如用户输入、文件读写和网络收发数据等，线程就比较有用了。在这种情况下我们可以释放一些珍贵的资源如内存占用等等。每个独立的线程有一个程序运行的入口、顺序执行序列和程序的出口。但是线程不能够独立执行，必须
系统 2019-09-27 17:46:37 2045
Python对文件的操作还算是方便的，只需要包含os模块进来，使用相关函数即可实现目录的创建。主要涉及到三个函数:1、os.path.exists(path)判断一个目录是否存在2、os.makedirs(path)多层创建目录3、os.mkdir(path)创建目录直接上代码:复制代码代码如下:defmkdir(path):#引入模块importos#去除首位空格path=path.strip()#去除尾部\符号path=path.rstrip("\\"
系统 2019-09-27 17:46:08 2045
介绍Python常见的字符串处理方式字符串截取>>>s='hello'>>>s[0:3]'he'>>>s[:]#截取全部字符'hello'消除空格及特殊符号s.strip()#消除字符串s左右两边的空白字符（包括'\t'，'\n','\r',''）s.strip('0')#消除字符串s左右两边的特殊字符（如'0'）,字符串中间的'0'不会删除例如：>>>s='000hello00world000'>>>s.strip('0')'hello00world's
系统 2019-09-27 17:45:26 2045
