大数据

       hive是大数据技术簇中进行数据仓库应用的基础组件，是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以hive-client进行处理。若需要开发应用程序，则…

  在做monkey测试的时候，有时候需要设置app与系统应用（比如调取系统权限类的系统应用）之间互跑，这时可以用腾讯GT，具体步骤如下：   此处以app调用系统相机为例，用adb shell pm list packages列出系…

学习spark任何技术之前，请先正确理解spark，可以参考：正确理解spark 以下对RDD的三种创建方式、单类型RDD基本的transformation api、采样Api以及pipe操作进行了java api方面的阐述 一、RDD的三种创建方式 从稳定…

看完这篇文章，你将学到如何在 Windows 上搭建基本的 Selenium 自动化环境。 1.本次使用的系统环境是最新的 Windows 10 17134 系统； 2.本次使用的 Python 版本为 3.4.4，使用这个版本的原因是 3.5 以后就不支持 XP…

常用的27个Stata命令 【1】直接导入csv格式数据 insheet using name.csv, clear 【2】修改变量长度 format var %20.2g 【3】删除重复值 sort var1 var2 duplicatesdrop var1 var2, force 【4】数据合并 use data1, …

iperf3命令使用 1，iperf3安装 iperf3下载：https://iperf.fr/iperf-download.php#fedora [root@localhost home]# rpm -ivhiperf3-3.1.3-1.fc24.x86_64.rpm Preparing...    &n…

为什么需要sequenceId? HBase数据在写入的时候首先追加写入HLog，再写入Memstore，也就是说一份数据会以两种不同的形式存在于两个地方。那两个地方的同一份数据需不需要一种机制将两者关联起来?有的朋友要问为什么…

基本操作 在Github上新建一个仓库Test，不初始化 然后，本地安装Git 在本地，新建一个相同库名的目录Test 进入目录，右键Git Bash HERE 按照如下命令操作即可：echo "# Test" >> README.mdgit init…

本人最近想做一个 使用Netty4和socket.js做IM客服坐席平台，以前没这方面的实际经验。这里自己实现了一套架构，这里记录下，希望有大师看到帮指点指点： 一张图说出我的心生：   IM消息数据持久化准备使用mong…

SIDDHI 是一款功能强大的CEP 引擎，具有自己的DSL,丰富的模式匹配功能和可扩展性, 感谢陈浩同学提供了SIDDHI和FLINK的整合功能 https://github.com/haoch/flink-siddhi 本文主要介绍了这个ADDON的一些实现思路 将FL…