区块链

一、大数据性能调优的本质 编程的时候发现一个惊人的规律，软件是不存在的！所有编程高手级别的人无论做什么类型的编程，最终思考的都是硬件方面的问题！最终思考都是在一秒、一毫秒、甚至一纳…

开发调优 调优概述 Spark性能优化的第一步，就是要在开发Spark作业的过程中注意和应用一些性能优化的基本原则。开发调优，就是要让大家了解以下一些Spark基本开发原则，包括：…

安装在集群上的spark版本：spark-1.6.3-bin-hadoop2.6.tgz             sca…

一、Spark集群基础概念               将DAG划分为多个stage阶段，遵循以下原…

1、RowFilter    提取rowkey以01结尾数据 Filter filter = new RowFilter…

一、Hbase结合mapreduce          为什么需要用 mapreduce 去访问 hbase 的数据？&…

一、 几个主要 Hbase API 类和数据模型之间的对应关系： 1、 HBaseAdmin关系： org.apache.hadoop.hbase.client.HBaseAdmi…

一、系统架构      客户端连接hbase依赖于zookeeper，hbase存储依赖于hadoop     client： 1…

引言：过滤器的类型很多，但是可以分为两大类——比较过滤器，专用过滤器过滤器的作用是在服务端判断数据是否满足条件，然后只将满足条件的数据返回给客户端； 一、hbase过滤器的分类 &…

一、协处理器—Coprocessor         1、 起源Hbase 作为列族数据库最经常被人诟病的特性包括：无法轻易建立“…