数据采集
-
HDFS源码分析(五)—–节点注册与心跳机制详解大数据
前言 在Hadoop的HDFS启动的时候,不知道大家有没有注意到一个细节,一般都是先启动NameNode,然后再启动DataNode,细想一下,原因就很简单了,因为NameNode…
-
HDFS源码分析(六)—–租约详解大数据
前言 任何系统即使做的再大,都会有可能出现各种各样的突发状况。尽管你可以说我在软件层面上已经做到所有情况的意外处理了,但是万一硬件出问题了或者说物理层面上出了问题,恐怕就不是多写几…
-
Partitioner分区过程分析详解大数据
Partition的中文意思就是分区,分片的意思,这个阶段也是整个MapReduce过程的第三个阶段,就在Map任务的后面,他的作用就是使key分到通过一定的分区算法…
-
hadoop添加节点和删除节点详解大数据
转自:http://www.cnblogs.com/ggjucheng/archive/2012/04/22/2465625.html 添加DataNode 1.部署hadoop和…
-
Sqoop实现MySql/Oracle与Hdfs/Hbase互导数据详解大数据
下文将重点说明通过Sqoop实现Mysql与HDFS互导数据,Mysql与Hbase,Oracle与Hbase的互导最后给出命令。 一、Mysql与HDFS互导数据 环境: 宿主机…
-
Hadoop代码笔记Hadoop作业提交之客户端作业提交详解大数据
【Hadoop代码笔记】Hadoop作业提交之客户端作业提交 by Douba on 2013年9月11日 in had…
-
dinfo-oec hadoop部署方案详解大数据
Hadoop2.6整合hbase1.1.0分布式环境搭建 环境准备 三台机器Lin…
-
Ubuntu下MongoDB的安装与使用(离线安装方式|非apt-get)详解大数据
本教程详细指导大家如何在离线状态下安装MongoDB。如果网络状态极差,而已经下载了MongoDB的安装包,可以参考本教程。 1、将安装包解压到/usr/local,并将解压的文件…
-
Ubuntu下开启MongoDB用户权限详解大数据
本教程详细指导大家如何开启并设置用户权限。MongoDB默认是没有开启用户权限的,如果直接在公网服务器上如此搭建MongoDB,那么所有人都可以直接访问并修改数据库数据了。 其实M…
-
Ubuntu下MongoDB的安装和使用详解大数据
本博文介绍了MongoDB,并详细指引读者在Ubuntu下MongoDB的安装和使用。本教程在Ubuntu14.04下测试通过。 一、MongoDB介绍 MongoDB 是一个是一…