开源
-
管理信息系统测试方法总结（七）
用户、权限管理 1. 赋予一个人员相应的权限后，在界面上看此人员是否具有此权限，并以此人员身份登陆，验证权限设置是否正确（能否超出所给予的权限）； 2. 删除或修改已经登陆系统并正在…
-
（10）响应式宣言、响应式系统与响应式编程——响应式Spring的道法术器
本系列文章索引《响应式Spring的道法术器》前情提要 响应式编程 | 响应式流 1.5 响应式系统 1.5.1 响应式宣言 关注“响应式”的朋友不难搜索到关于“响应式宣言”的介绍，先上图： 这张图凝聚了许多大神的智慧和经验，…
-
Git工程开发实践（一）——Git基础
Git工程开发实践（一）——Git基础 一、版本控制系统 1、版本控制系统简介 版本控制系统(VCS,Version Control Systems)是一种记录一个或若干文件内容变化，以便将来查阅特定版本修订情况的系统。版本控制系统分为：A…
-
centos6.5下安装ambari
Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari目前已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。 一、前期环境准…
-
hadoop安装与配置
1.检查JDK版本 2.时间同步 3.设置免密码登录 #生成密钥(node1,node2,node3,node4) ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa cd ~/.ssh/ ls #说明 ##id_ds 私钥 ##is_dsa…
-
千呼万唤始出来——DataV私有部署功能
DataV的开发者们，今天进入你的用户中心，就会发现有一个小惊喜默默的在等待着你。那就是——私有部署功能上线啦！ 一直以来私有部署都是一些有需要的小伙伴所望尘莫及的，毕竟高贵的身份摆在那里，现在不用再看着它…
-
四、MapReduce中的排序
一、排序概述 1、在MapReduce的shuffle过程中执行了三次排序，分别是：map的溢写阶段：根据分区以及key进行快速排序map的合并溢写文件：将同一个分区的多个溢写文件进行归并排序，合成大的溢写文件reduce输入阶段：…
-
Hadoop学习--map集合序列化--day07
import java.io.ByteArrayInputStream; import java.io.ByteArrayOutputStream; import java.io.DataInputStream; import java.io.DataOutputStream; import java.io.IOException; import org.apache.hadoop.io.Int…
-
测试环境之Linux安装MySQL数据库
1.先确定自己 系统的版本，选择合适的mysql版本 cat /proc/version 2. mysql 下载链接地址 https://dev.mysql.com/downloads/mysql/ 3.上传，文件 rz 4.解压文件 tar -zxvf mysql-5.6.36-linux-glibc2.5-i686.tar.g…
-
如何设计实时数据平台（技术篇）
导读：实时数据平台（RTDP，Real-time Data Platform）是一个重要且常见的大数据基础设施平台。在上篇（设计篇）中，我们从现代数仓架构角度和典型数据处理角度介绍了RTDP，并探讨了RTDP的整体设计架构。本文作为下…