开源
-
大数据生态学习__HS&MR
Hadoop：版本迭代较快，最新为3.0版本，本次学习以2.0为主；
-
关于Hbase的RegionServer的GC持续时间过长解决办法
问题现象： 分析原因： http://www.aboutyun.com/thread-11240-1-1.html http://blog.csdn.net/wwwxxdddx/article/details/50981089 修改方法： 只用原有的配置在后面增加 -XX:+UseCMSInitiatingOccupancyOn…
-
基于Hadoop数据仓库Hive1.2部署及使用
以下基于上篇Hadoop2.6集群部署：http://lizhenliang.blog.51cto.com/7876557/1661354 接下来安装Hadoop数据仓库Hive，上节了解HBase简单使用，听起来HBase与Hive有些类似，概念也有点模糊，那我们先了解下他们之间…
-
ZKFC服务异常：Parent znode does not exist.
昨天搭建了一套hadoop集群，今天发现两个namenode的zkfc服务起不来，在zkfc日志中发现如下所示的信息： Unable to start failover controller. Parent znode does not exist. ./bin/zkCli.sh -server master1 ls / …
-
软件测试中的认知偏差：为什么测试人员错过了错误？
软件测试中的认知偏差：你受到了影响吗？随着技术的进步，测试世界正在以更快的速度发展，以确保“光速下的质量”。 “持续集成，数字化转型，生命周期自动化，向左移动质量以最大限度地降低成本”等等都是一些不断变化…
-
功能测试用例的书写
功能测试用例的书写 功能性测试用例 1.测试的来源，及测试的需求 测试用力的主要来源有： 1）需求说明及相关文档 2）相关的设计说明（概要设计，详细设计等） 3）与开发组交流对需求理解的记录（可以是…
-
Spark的transformation和action算子简介
transformation算子 map(func) 返回一个新的分布式数据集，由每个原元素经过func函数处理后的新元素组成 filter(func) 返回一个新的数据集，由经过func函数处理后返回值为true的原元素组成 flatMap(func) 类似于map…
-
Flink 零基础实战教程：如何计算实时热门商品
在上一篇入门教程中，我们已经能够快速构建一个基础的 Flink 程序了。本文会一步步地带领你实现一个更复杂的 Flink 应用程序：实时热门商品。在开始本文前我们建议你先实践一遍上篇文章，因为本文会沿用上文的my-fl…
-
Robotframework关于等待时间的关键字
1，Sleep一个线程等待的逻辑，进程等待N秒后再运行；2，Implicit Wait隐式等待，Get Selenium Implicit Wait 与 Set Selenium Implicit Wait分别是取隐式等待时间与设置隐式等待时间；隐式等待，在一定时间内找到元…
-
HDFS用法
HDFS体系结构： 实战：HDFS是文件系统，那么它就支持对文件系统的基本操作，比如文件的增删改查、权限的修改，文件夹的创建，删除，重命名等操作；对HDFS的操作命令类似与linux的shell对文件的操作 如：ls、mkdir、…