Hadoop-2.6.0学习笔记汇总

鲁春利的工作笔记，好记性不如烂笔头

---

 

Hadoop是适用于大数据处理的、分布式的存储(HDFS)和计算(MapReduce)平台，在Hadoop2.0版本开始引入了yarn来实现资源管理与作业调度。

HDFS

    Hadoop2.6.0学习笔记（一）HA集群搭建

        http://luchunli.blog.51cto.com/2368057/1672186

    Hadoop2.6.0学习笔记（二）HDFS访问

        http://luchunli.blog.51cto.com/2368057/1676081

    Hadoop2.6.0学习笔记（三）HDFS架构

        http://luchunli.blog.51cto.com/2368057/1716883

    Hadoop2.6.0学习笔记（四）HDFS安全模式磁盘限额复制因子

        http://luchunli.blog.51cto.com/2368057/1717733

    Hadoop2.6.0学习笔记（五）HDFS的httpFS访问

        

    Hadoop2.6.0学习笔记（六）HDFS权限管理

        

    Hadoop2.6.0学习笔记（七）HDFS读写流程

        http://luchunli.blog.51cto.com/2368057/1717812

    Hadoop2.6.0学习笔记（八）Hadoop启动脚本介绍

        http://luchunli.blog.51cto.com/2368057/1683964

 

MapReduce

    Hadoop2.6.0学习笔记（一）MapReduce介绍

        http://luchunli.blog.51cto.com/2368057/1676185   

    Hadoop2.6.0学习笔记（二）MapReduce通过Eclipse运行

        http://luchunli.blog.51cto.com/2368057/1676092

    Hadoop2.6.0学习笔记（三）Hadoop序列化

        http://luchunli.blog.51cto.com/2368057/1717872

    Hadoop2.6.0学习笔记（四）TextInputFormat及RecordReader解析

        http://luchunli.blog.51cto.com/2368057/1718322

    Hadoop2.6.0学习笔记（五）自定义InputFormat和RecordReader

        http://luchunli.blog.51cto.com/2368057/1718819   

    Hadoop2.6.0学习笔记（六）TextOutputFormat及RecordWriter解析

        http://luchunli.blog.51cto.com/2368057/1719174

    Hadoop2.6.0学习笔记（七）MapReduce分区

        http://luchunli.blog.51cto.com/2368057/1719916

    Hadoop2.6.0学习笔记（八）InputFormat和OutputFormat

        http://luchunli.blog.51cto.com/2368057/1720480

    Hadoop2.6.0学习笔记（八）MapReduce排序和分组

        

    Hadoop2.6.0学习笔记（八）MapReduce中Combiner

        

    

    Hadoop2.6.0学习笔记（八）MapReduce实现TopN

        http://luchunli.blog.51cto.com/2368057/1682074

    HBase-1.0.1学习笔记（？）MapReduce的shuffle总结

        

    HBase-1.0.1学习笔记（？）MapReduce的调优

         

    Hadoop2.6.0学习笔记（？）MapReduce操作MySQL数据库

        http://luchunli.blog.51cto.com/2368057/1682076

    

    Hadoop2.6.0学习笔记（？）文件的存储结构

        http://luchunli.blog.51cto.com/2368057/1717819

    Hadoop2.6.0学习笔记（八）SPOF解决方案总结
        http://luchunli.blog.51cto.com/2368057/1676688
    Hadoop2.6.0学习笔记（九）SPOF解决方案Quorum机制
        http://luchunli.blog.51cto.com/2368057/1678923   
    Hadoop2.6.0学习笔记（十）SPOF解决方案QJM
        http://luchunli.blog.51cto.com/2368057/1676478

    Hadoop2.6.0学习笔记（十四）Hadoop Two HA: ActiveStandbyElector

        http://luchunli.blog.51cto.com/2368057/1682193

 

Yarn

    Hadoop2.6.0学习笔记（一）Yarn介绍