开源
-
大数据时代：传统BI还能走多远？
<div class="iteye-blog-content-contain" > 从事BI多年，经历了经营分析系统的大建设，大发展时期，也有幸处在大数据与传统BI系统的交替之际，因此特别来谈谈，传统BI还能走多远？ <img src="http:/…
-
整理 JAVA中的IO流 (字符流和字节流两个大类）
java中的io流分为两类，字符和字节： OutputStream和InputStream字节流的父类，抽象。OutputStream有两个提供了实现的接口closable和flushable。 Writer和Reader字符流的父类，抽象。实际上在流的操作中，底层与文…
-
一文带你弄懂Livy——基于Apache Spark的REST服务
背景 Apache Spark作为当前最为流行的开源大数据计算框架，广泛应用于数据处理和分析应用，它提供了两种方式来处理数据：一是交互式处理，比如用户使用spark-shell或是pyspark脚本启动Spark应用程序，伴随应用程序…
-
Lr(2)-脚本调试之“集合点” 和 “事务”
本篇文章主要介绍的是脚本部分的“事务”和“集合点”的插入 插入集合点 1、集合点的含义 集合点：也叫并发点，Lr通过集合点实现了真正意义的并发，当脚本运行到集合…
-
Hive中的ObjectInspector设计
ObjectInspector是Hive中一个咋一看比较令人困惑的概念，当初读Hive源代码时，花了很长时间才理解。 当读懂之后，发现ObjectInspector作用相当大，它解耦了数据使用和数据格式，从而提高了代码的复用程度。 简单的…
-
hadoop（cdh版）下载安装即配置
下载hadoop压缩包，这里下载的是5.14.2版本（地址：http://archive.cloudera.com/cdh6/cdh/5/） 2.通过Xftp工具将压缩包拉到虚拟机/opt目录下（目录个人随意）3.解压hadoop压缩包（命令：tar -zxvf hadoop-2.6.0-cd…
-
GT手机性能测试工具二：项目中配置
GT demo官方示例文档 http://gt.qq.com/docs/i/GTiOSUserGuide.pdf 云笔记中实践GT过程 云笔记项目中嵌入GT framework： step1 下载framework SDK 下载地址 http://gt.qq.com/download.html iOS平台 最新release版…
-
0039-如何使用Python Impyla客户端连接Hive和Impala
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.文档编写目的 继上一章讲述如何在CDH集群安装Anaconda&搭建Python私有源后，本章节主要讲述如何使用Pyton Impyla客户端连接CDH集群的HiveSe…
-
学习笔记--hadoop
Hadoop hadoop-1.2.1.tar.gz jdk-6u32-linux-x64.bin Useradd -u 900 hadoop Mv jdk1.6.0_32 /home/hadoop Mv hadoop-1.2.1.tar.gz/home/hadoop Chown hadoop.hadoop /home/hadoop -R Su -hadoo…
-
mac或linux下安装hadoop-2.8流程
mac上安装hadoop 1,mac下的java ll /usr/bin |grep'java' 默认: /System/Library/Frameworks/JavaVM.framework/Versions/Current/Commands/java 具体的安装路径: /Library/Java/JavaVirtualMachines/下面， …