数据治理

//创建文件核心代码 public static void createNewHDFSFile(String toCreateFilePath, String content) t…

我机子上的hadoop安装有一阶段了，由于前几天发现机子上垃圾太多，自己给清理了一下，一不小心不知道清除了什么，导致我的hadoop无法正常启动了。每次执行start-all.sh…

  使用HDFS java api 下载文件到本地的代码如下：   String file=”hdfs://localhost:9000/…

 //将本地文件上传到hdfs。  String target=”hdfs://localhost:9000/user/Administr…

hadoop可以创建自己的归档文件  即har文件（hadoop archive file）。下面的一个shell命令展示如何创建归档文件： $ hadoop archi…

<property>  <name>mapred.child.java.opts</name>  <value>…

1、下载hive:wget http://mirrors.cnnic.cn/apache/hive/hive-0.12.0/hive-0.12.0.tar.gz2、解压hive安装…

sqoop是一个把关系型数据库数据抽向hadoop的工具。同时，也支持将hive、pig等查询的结果导入关系型数据库中存储。由于，笔者部署的hadoop版本是2.2.0，所以sqo…

SSH无密安装与配置 具体配置步骤： ◎ 在root根目录下创建.ssh目录 （必须root用户登录） cd /root &&nbs…

1、HRegionServer启动不正常 在namenode上执行jps,则可看到hbase启动是否正常，进程如下： [[email protected] bin]# j…