区块链
-
mongodb3.2副本集配置详解大数据
推荐官网的副本集配置: https://docs.mongodb.com/manual/tutorial/deploy-replica-set/ 从概念上说一下MongoDB副本集…
-
mongoDB的常用语法详解大数据
安装: 到mongodb官网下载安装包或者压缩包:https://www.mongodb.com/download-center?jmp=nav 1、如果是msi包的话则点击按步骤…
-
MongoDB嵌套查询详解大数据
如果要查询整个内嵌文档,查询语句如下: db.customer.find({“login_user” : {“_id”:ObjectId(“5760e593086659036b77…
-
MongoDB 分片状态recovering详解大数据
mongodb集群分片的数据查询的时候变慢,db.collection.find()不设置条件的查询几乎查不出来,通过检查集群…
-
Hadoop:相关概念详解大数据
Hadoop:相关概念 一、Hadoop简介 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS. 1.特点 (1)…
-
MapReduce运行原理详解大数据
MapReduce是一种编程模型,用于大规模数据集(大于1TB)的并行运算。MapReduce采用”分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同…
-
基于Zookeeper的分布式锁详解大数据
实现分布式锁目前有三种流行方案,分别为基于数据库、Redis、Zookeeper的方案,其中前两种方案网络上有很多资料可以参考,本文不做展开。我们来看下使用Zookeeper如何实…
-
Hive权限介绍详解大数据
阅读目录 一、开启权限 目前hive支持简单的权限管理,默认情况下是不开启,这样所有的用户都具有相同的权限,同时也是超级管理员,也就对hive中的所有表都…
-
使用MapReduce求任何两名员工信息传递所需要经过的中间节点数详解大数据
问题分析该公司所有员工可以形成入下图的树形结构,求两个员工的沟通的中间节点数,可转换在员工树中求两个节点连通所经过的节点数,即从其中一节点到汇合节点经过节点数加上另一节点到汇合节点…
-
使用MapReduce将全体员工按照总收入(工资+提成)从高到低排列详解大数据
问题分析求全体员工总收入降序排列,获得所有员工总收入并降序排列即可。在Mapper阶段输出所有员工总工资数据,其中key为员工总工资、value为员工姓名,在Mapper阶段的最后…