开源

hadoop忽略回收站删除指定目录或文件/dirhadoop fs -rmr -skipTrash /dir

一、修改分片数 elasticsearch默认分片数为5，副本数为1.如果需要修改分片数有两种方式 1、修改索引settings 查看索引状态：curl -GET "http://localhost:9200/index/__settings" 修改索引状态信息： curl -XP…

二、dm dedup的原理 dmdedup在github上面的代码：https://github.com/dmdedup/dmdedup4.13设计文档http://www.fsl.cs.stonybrook.edu/docs/ols-dmdedup/dmdedup-ols14.pdf作者：dm-dedup was developed in the File…

安装kafka manager [root@emm-kafka01-10--174 ~]# cd /opt/ins/ [root@emm-kafka01-10--174 ins]# ll total 292188 -rwxr-xr-x 1 root root 166044032 Mar 13 15:58 jdk-8u102-linux-x64.rpm -rw-r--r-- 1 root ro…

前提:zk 什么是kafka 百度百科Kafka是一个分布式的、分区的、多复本的日志提交服务。它通过一种独一无二的设计提供了一个消息系统的功能。目标是为处理实时数据提供一个统一、高通量、低等待的平台。kafka是一个分…

因为想用以下flink的ml功能，因此需要将flink升级到1.9. 修改pom文件版本后，代码几乎没报错，一阵高兴，只有批处理的创建变了 BatchTableEnvironment tableEnv = new BatchTableEnvironment(env, TableConfig.DEFA…

测试的同学们在做app自动化测时，经常会用到查找元素、定位元素、发送数据、长按、点   击、上滑、下滑、左滑、右滑等操作。下面讲下用appium自带的swipe方法怎么实现上滑、   下滑、左滑、右滑。  …

     武林中人很多都要求自己各种兵器都能够使用，但每个人都会有一个自己最擅长的兵器。以前这四种软件就如大数据里的“刀枪棍棒”。兵器只是一部分，重要的还是我们自身对于大数据的理解…

<bean id="sessionManager" class="org.apache.shiro.web.session.mgt.DefaultWebSessionManager"> <property name="sessionIdUrlRewritingEnabled" value="false" /> </bean>

-- case2 -- --========== click_log ==========-- /* 11    ad_101    2014-05-01 06:01:12.334+01 22    ad_102 &n…