数据分析
-
Hadoop学习之SecondaryNameNode详解大数据
在启动Hadoop时,NameNode节点上会默认启动一个SecondaryNameNode进程,使用JSP命令可以查看到。SecondaryNameNode光从字面上理解,很容易…
-
Hadoop 2.0中单点故障解决方案总结详解大数据
Hadoop 1.0内核主要由两个分支组成:MapReduce和HDFS,众所周知,这两个系统的设计缺陷是单点故障,即MR的JobTracker和HDFS的NameNode两个核心…
-
HBase性能调优详解大数据
因官方Book Performance Tuning部分章节没有按配置项进行索引,不能达到快速查阅的效果。所以我以配置项驱动,重新整理了原文,并补充一些自己的理解,如有错误,欢迎指…
-
zookeeper适用场景:如何竞选Master及代码实现详解大数据
问题导读:1.如何利用zookeeper保证集群Master可用性和唯一性?2.zookeeper竞选Master包含哪些过程?3.zookeeper竞选Master机制利用了zk…
-
zookeeper适用场景:配置文件同步详解大数据
问题导读:1.本文三个角色之间是什么关系?2.三个角色的作用是什么?3.如何代码实现这三个角色的作用? 在 zookeeper适用场景:zookeeper解决了哪些问题有…
-
zookeeper适用场景:分布式锁实现详解大数据
问题导读:1.zookeeper如何实现分布式锁?2.什么是羊群效应?3.zookeeper如何释放锁? 在zookeeper应用场景有关于分布式集群配置文件同步问题的描述,设想一…
-
zookeeper中Watcher和Notifications详解大数据
问题导读:1.zookeeper观察者什么时候调用?2.传统远程轮询服务存在什么问题?3.zk中回调服务的机制是什么?4.zk中watcher为什么不永久注册?5.什么是znode…
-
hadoop中NameNode、DataNode和Client三者之间协作关系及通信方式介绍详解大数据
<ignore_js_op> 1)NameNode、DataNode和Client &nbs…
-
解决客户端通过zookeeper连接到hbase时连接过多的问题详解大数据
原因:客户端程序通过zookeeper访问hbase的连接数超过设置的默认链接数(默认数是30),连接数不够用会导致后续的连接连接不上去。 解决办法:设置hbase-site.xm…
-
Hive安装过程(mysql/oracle存储元数据)详解大数据
Hive安装过程(mysql/oracle存储元数据) 前置条件: – mysql数据库已经安装成功 – hadoop环境已经配置正确,且可以提供正常服务 …