以下代码实现将本地文件拷到HDFS集群中packagecom.njupt.hadoop;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.hadoop.fs.Path;publicclassCopyToHDFS{publicstaticvoidmain(String[]args)throwsException{C
系统 2019-08-12 01:32:21 1975
importos,sysimportrequestsimportbs4importpymysql#importMySQLdb#连接MYSQL数据库，第一个参数是ip地址/数据库的用户名/密码/数据库名称/端口/编码格式db=pymysql.connect(host='127.0.0.1',user='root',password='mysql',db='test',port=3306,charset='utf8')#db=MySQLdb.connect('
系统 2019-09-27 17:57:32 1974
python小技巧记录我发现1、str转bool方法2、python判断文件和文件夹是否存在、创建文件夹3、文件操作4、python字典遍历的几种方法4.1、遍历key值4.2、遍历value值4.3、遍历字典项4.4、遍历字典健值5、Python列表(List)的三种遍历(序号和值)方法6、python字典判断某个Key是否存在我发现好多有用的小技巧其实都不难，但是每次用的时候，我都要去百度，主要是懒得去记，刚好突然有个想法，总结一些实用小技巧，归类整理
系统 2019-09-27 17:56:06 1974
本文实例讲述了python实现的自动发送消息功能。分享给大家供大家参考，具体如下：一个简单的脚本#-*-coding:utf-8-*-from__future__importunicode_literalsfromthreadingimportTimerimportitchatimportrequests#抓取金山毒霸每日一句，英文和翻译defget_news():url="http://open.iciba.com/dsapi/"r=requests.g
系统 2019-09-27 17:56:02 1974
目录基础特性数据结构/常用函数函数类装饰器文件异常模块常用模块基础特性●首部添加#!/usr/bin/envpython3表示这是一个python3程序●变量为动态类型,弱类型语言的主要特性之一，要声明变量直接变量名=xx即可，如x=777●语句之后没有分号;作为结束，取而代之的是每行首部的缩进进行标识●运算符号中**代表^即指数，#为//,即注释，"""..."""为文档字符串,即/**...*/●默认数值类型为浮点型●基本类型函数;int(变量)，fl
系统 2019-09-27 17:54:49 1974
前言pytest是一款强大的python自动化测试工具，可以胜任各种类型或者级别的软件测试工作。pytest提供了丰富的功能，包括assert重写，第三方插件，以及其他测试工具无法比拟的fixture模型。pytest是一个软件测试框架，是一款命令行工具，可以自动找到测试用例执行，并且回报测试结果。有丰富的基础库，可以大幅度提高用户编写测试用例的效率。具备扩展性，用户可以自己编写插件，或者安装第三方提供的插件。可以很容易地与其他工具集成到一起使用。比如持续
系统 2019-09-27 17:54:49 1974
https://www.bilibili.com/video/av53583801/?p=20学习笔记文章目录1SingleLinkList2DoubleLinkList3SingleCycleLinkList4小结1SingleLinkList图片来源：https://www.bilibili.com/video/av53583801/?p=19classNode(object):def__init__(self,value,next=None):sel
系统 2019-09-27 17:54:16 1974
函数定义函数是一段实现特定功能的代码，定义一个函数名称，通过这个函数名称可以多次调用该函数函数的定义方法以及特点函数名：一般说只要合法标识符就行，但为了代码的通读性，约定全部小写字母，多个字母之间用下划线形参列表：用于定义函数可接收的参数，多个参数用逗号隔开，在函数中定义了参数，在调用的时候必须传参函数关键字def函数可以定义零个或者多个参数使用return结束函数。默认返回None。函数帮助文档定义函数帮助文档：只需要一段字符串放在函数声明之后，函数体之
系统 2019-09-27 17:52:49 1974
要了解NumericalPython软件包的第一件事情是，NumericalPython不会让您去做标准Python不能完成的任何工作。它只是让您以快得多的速度去完成标准Python能够完成的相同任务。实际上不仅仅如此；许多数组操作用Numeric或者Numarray来表达比起用标准Python数据类型和语法来表达要优雅得多。不过，惊人的速度才是吸引用户使用NumericalPython的主要原因。其实，NumericalPython只是实现了一个新的数据
系统 2019-09-27 17:49:51 1974
写了个阿里巴巴招聘网站爬虫，这次是存在csv文件里，小伙伴们可以对比一下～importrequests,json,csv#写入csv文件中list=[]csv_file=open('阿里巴巴招聘.csv','w+',newline='',encoding='utf=8')writer=csv.writer(csv_file)list_head=['职位名称','部门','是否招聘','学历','大类','小类','工作地','工作经历','要求','职责'
系统 2019-09-27 17:49:31 1974
