开源
-
spark2.x由浅入深深到底系列七之python开发spark环境配置
学习spark任何的技术前，请先正确理解spark，可以参考: 正确理解spark 以下是在mac操作系统上配置用python开发spark的环境 一、安装python spark2.2.0需要python的版本是Python2.6+ 或者 Python3.4+ 可以参考…
-
Spark-submit 测试任务提交
Spark-submit 测试任务提交 ./spark-submit --keytab /usr/local/noah/basp-dataprocess-log/conf/noah.keytabs --principal noah@BJ.CTC --class org.apache.spark.examples.SparkPi --master local[*] ../lib/spa…
-
Spark-Error-Common
IDEA 开发 WordCount（Spark）报错 WordCount { } WordCount{ (args: Array[]) { ha…
-
无法录制下拉菜单的解决方法
QTP默认录制方式无法录制下拉菜单，需修改设置后再录制 修改设置如下： 1、Record-> web event recording configuration -----custom settings... 展开Web objects 2、选中webelement，点击event -> add ->…
-
[Win] 免登录百度网盘高速下载器 ENFI下载器 v1.3.1
ENFI下载器是一款为百度网盘资源打造的加速下载软件，界面简洁明了，上手简单，支持各路老司机资源下载，下载的文件大小与流量余额扣除成正比，听到这里是不是很慌，担心要花费RMB才能继续用，这些是不存在滴，您只…
-
Vim 查找文件
一.文件浏览器 :edit . .代表当前目录，可以指定任意目录； 显示文件列表后可以通过移动j,k移动选择，按 <Enter> 是在当前窗口打开选择的文件 o &…
-
Flume+Kafka+Zookeeper搭建大数据日志采集框架
1. JDK的安装 参考jdk的安装，此处略。 2. 安装Zookeeper 参考我的Zookeeper安装教程中的“完全分布式”部分。 3. 安装Kafka &nb…
-
探索性测试之bug单补全法
探索性测试之bug单补全法 通过Bug本身进行的探索性测试。 精准的Bug描述，可以方便定位问题。 模糊或错位的Bug描述，会增加排查问题的难度，走在…
-
数据分析用它就够了 | 37 个场景告诉你为什么
【报表查询性能】 1. 数据量大或并发多导致的查询性能低下，BI 界面拖拽响应很慢 通过集算器编写更为简单高效的算法加速计算进程，提升查询性能 采用集算器可控存储和索引机制，为 BI（CUBE）提供高速的数据存储 2.…
-
zookeeper+kafka集群部署+storm集群
zookeeper+kafka集群部署+storm集群 一、环境安装前准备： 准备三台机器 操作系统：centos6.8 jdk:jdk-8u111-linux-x64.gz zookeeper:zookeeper-3.4.11.tar.gz kafka: kafka_2.11-1.0.1.tgz storm:apache-storm-1.2…