数据中台

    在Hadoop中，启动作业运行的方式有很多，可以用命令行格式把打包好后的作业提交还可以，用Hadoop的插件进行应用开发，在这么多的方式中，都会必经过一…

前言 在准备开始写本篇文章之前,我一直在想应该给本篇文章定一个怎样的标题才能最精准的表达出主题而又不会让字数变得过多.因为Metric指标监控在YARN中早已经存在了,而且支持的指…

前言 在Hadoop的HDFS启动的时候,不知道大家有没有注意到一个细节,一般都是先启动NameNode,然后再启动DataNode,细想一下,原因就很简单了,因为NameNode…

前言 任何系统即使做的再大，都会有可能出现各种各样的突发状况。尽管你可以说我在软件层面上已经做到所有情况的意外处理了，但是万一硬件出问题了或者说物理层面上出了问题，恐怕就不是多写几…

  Partition的中文意思就是分区，分片的意思，这个阶段也是整个MapReduce过程的第三个阶段，就在Map任务的后面，他的作用就是使key分到通过一定的分区算法…

转自：http://www.cnblogs.com/ggjucheng/archive/2012/04/22/2465625.html 添加DataNode 1.部署hadoop和…

下文将重点说明通过Sqoop实现Mysql与HDFS互导数据，Mysql与Hbase,Oracle与Hbase的互导最后给出命令。 一、Mysql与HDFS互导数据 环境： 宿主机…

【Hadoop代码笔记】Hadoop作业提交之客户端作业提交 by  Douba  on  2013年9月11日  in  had…

Hadoop2.6整合hbase1.1.0分布式环境搭建 环境准备          三台机器Lin…

本教程详细指导大家如何在离线状态下安装MongoDB。如果网络状态极差，而已经下载了MongoDB的安装包，可以参考本教程。 1、将安装包解压到/usr/local，并将解压的文件…