开源
-
Hadoop集成Spring的使用
Spring Hadoop简单概述 Spring Hadoop官网地址如下： https://projects.spring.io/spring-hadoop/ Spring Hadoop简化了Apache Hadoop，提供了一个统一的配置模型以及简单易用的API来使用HDFS、MapReduce、Pig以及Hi…
-
使用guava库的Preconditions类来处理数据校验
Guava是一种基于开源的Java库，其中包含谷歌正在由他们很多项目使用的很多核心库。这个库是为了方便编码，并减少编码错误。这个库提供用于集合，缓存，支持原语，并发性，常见注解，字符串处理，I/O和验证的实用方…
-
Java 如何调用 SPL 脚本
集算器提供了 JDBC 驱动，很容易嵌入到 Java 程序调用，方法和在 Java 中执行 SQL 和存储过程类似。 Java 应用程序中部署集算器 JDBC 首先将 JDBC 部署到 java 应用项目中，简单来说就是，将启动 JAVA 应用程序时加…
-
史上最详细的HashTable源码解析，最容易懂
HashTable源码分析 更多资源和教程请关注公众号：非科班的科班。如果觉得我写的还可以请给个赞，谢谢大家，你的鼓励是我创作的动力###1.前言Hashtable 一个元老级的集合类，早在 JDK 1.0 就诞生了 ###1.1.摘要在集…
-
三、kibana原理和使用
一、Kibana概述 Kibana是一个开源的分析和可视化平台，设计用于和Elasticsearch一起工作。你用Kibana来搜索，查看，并和存储在Elasticsearch索引中的数据进行交互。你可以轻松地执行高级数据分析，并且以各种图标…
-
TestBird频现国内手游“盛宴” 开发商互相介绍用得很赞
TestBird自2013年创建以来得到了各方的关注，其首创的游戏对象识别技术突破了行业技术难题，带领行业走出测试结果不精确、费人费力的僵局。2014年，TestBird继续发力，先后在Chinajoy、GMIC、TFC、GMGDC四大游戏盛…
-
使用Apache Flume抓取数据（1）
使用Apache Flume抓取数据，怎么来抓取呢？不过，在了解这个问题之前，我们必须明确ApacheFlume是什么？ 一、什么是Apache Flume Apache Flume是用于数据采集的高性能系统 ，名字来源于原始的近乎实时的日志数据采…
-
Python3 操作 HDFS
【第三方包】 pyhdfs（pypi，github，支持HA） 【功能】 重命名 hdfs 文件或目录 # encoding: utf-8 # author: walker # date: 2018-03-17 # summary: 利用 py…
-
Hadoop之AVRO
Avro是个支持多语言的数据序列化框架，支持c，c++，c＃，python，java，php，ruby，java。他的诞生主要是为了弥补Writable只支持java语言的缺陷。 1 AVRO简介 很多人会问类似的框架还有Thr…
-
hbase单节点安装部署
本次配置延续上次的hadoop伪分布式安装部署 资源下载 http://mirrors.hust.edu.cn/apache/zookeeper/zookeeper-3.4.12/zookeeper-3.4.12.tar.gz http://mirror.bit.edu.cn/apache/hbase/stable/hbase-1.2.6-bin.tar…