大数据
-
第45讲：Scala中Context Bounds代码实战及其在Spark中的应用源码解析
与view bounds一样context bounds(上下文界定)也是隐式参数的语法糖 我们使用view bounds的方式的写法如下： class Pairs[T <% Comparable[T]](first: T,second:T){ def&…
-
简单说说大数据高级工程师微专业的这四个月
岁月如白驹过隙，认真想了想过去的四个月。其实压力真的挺大的，上班没事干时偷偷学，加班学，下班了回去继续学，有很长一段时间学到了半夜两点多，第二天七点多又要起床准备去上班，这…
-
Cassandra 读写一致性（Consistency）详解
Consistency 此命令显示当前的一致性级别，或设置新的一致性级别。Consistency可以理解读和写操作的Consistency Level写操作的consistency level指定了写操作在通知客户端请求成功之前，必须确保已经成功完成写操作…
-
centos7安装redmine3，并升级redmine1.8到3
1.安装mysql wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm rpm -ivh mysql-community-release-el7-5.noarch.rpm yum install mysql-server service mysql&…
-
一次yarn服务unhealthy状态处理
自从hadoo集群新加了9个节点之后，有时候发现yarnweb页面有1个或者几个unhealthy状态的节点，但是过一会又正常了，但这种状态经常引起后台的监控的报警。查看了异常节点的日志显示如下yarn的本地日志目录使用超过了…
-
Flume笔记整理
[TOC] Flume简介 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 支持在日志系统中定制各类数据发送方，用于收集数据； 同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本…
-
04. Mybatis的resultMap基本应用
resultMap 元素是 MyBatis 中最重要最强大的元素。它就是让你远离 90%的需要从结果集中取出数据的 JDBC 代码的那个东西，而且在一些情形下允许你做一些 JDBC 不支持的事情。事实上，编写相似于对复杂语句联合映射这…
-
XStream的使用
本文主要用于记录XStream的使用方式，特别是其中的“对象默认值”和Map转换器的使用 1，添加Maven依赖 <dependency> <groupId>com.thoughtworks.xstream</groupId> <artifactId>xstream</…
-
为虚拟机配置NAT和本地网络
在公司的办公电脑上使用Virtual Box安装Linux（RHEL7）虚拟机，希望既能通过公司代理上网，又能与主机相连 步骤： 关闭虚拟机 在虚拟机设置里为该虚拟机配置两块网卡，第一块选择“网络地址转换”，第二块选择“仅主机…
-
hadoop 3.0.0 安装配置
环境描述根据需求，部署hadoop-3.0.0基础功能架构，以三节点为安装环境，操作系统CentOS 7 x64；openstack创建三台虚拟机，开始部署；IP地址 主机名10.10.204.31 master10.10.204.32 node110.10.204.33 node2 功能…