开源

请使用0.9以后的版本： 示例代码 Properties props = new Properties(); props.put("bootstrap.servers", "kafka01:9092，kafka02:9092"); props.put("group.id", "test"); props.put("enable.auto.commit", "true"…

本文摘自：李福东《大数据运营-服务型企业架构新思维》3.3.9 对于企业来说，大数据服务的目标可以归结为“降本增效”四个字。企业可以借助大数据服务做精准化营销，将企业的产品有效地传递给有此需求的用户，在为客户…

Druid连接池 简介 由阿里巴巴开源的druid连接池是目前综合实力最突出的数据库连接池，而且还提供了监控日志功能，能够分析SQL执行情况。 引入druid连接池 pom.xml中加入 <dependency> <groupId>com.ali…

自动化单元测试 人们在使用“单元测试”这个术语时比较随意。这可能会导致困惑，特别是当人们开始声称他们的单元测试“花了很长的时间执行”时。为开发者测试定义一个常用词汇表有助于将测试进…

loadrunner11使用常见问题 脚本录制为空        1. 检查协议是否正确；        2. 关闭无关浏览器，设置IE或者火狐为默认浏览器；        3. 录制选项 -> Network -> 端口映射 -> 捕获级别，修改为：socke…

[TOC] 一、spark中一些基本术语 RDD：弹性分布式数据集，是spark的核心重点算子：操作RDD的一些函数application：用户的写的spark程序（DriverProgram + ExecutorProgram）job：一个action类算子触发的操作stage：…

一、 准备工作 1.       分析请求   在浏览器的开发者控制面板，打开network，选择要跟踪的请求，查看headers部分。 Headers分为： General，查找Request URL和 Request Method…

 parseXmlFile.sh #!/bin/bash Usage() {         echo "Usage: ./parseXmlFile.sh <target.xml>"         exit 1 } list_all_entity() {     &nbsp…

第一，RDD架构重构与优化 尽量去复用RDD，差不多的RDD，可以抽取称为一个共同的RDD，供后面的RDD计算时，反复使用。 第二，公共RDD一定要实现持久化 对于要多次计算和使用的公共RDD，一定要进行持久化。 持久化，也…

缓存   此时OpenTSDB没有内置缓存（除了将缓存PNG图像文件60秒的内置GUI）。因此只能依靠底层数据库的缓存。在HBase（最常见的OpenTSDB后端）中，有一个块缓存的概念，它可以在写入 和/或 读取时在内存中…