大数据
-
shell脚本总结
Shell语言的总结 Shell变量 1.用户自定义 :标示符 从右向左赋值 &…
-
性能优化技巧 - 组表数据更新
组表是集算器提供的高性能存储格式,其原理在于将数据事先排序并以压缩方式紧致存储,好处是占用空间更小,可利用有序进行快速定位。 但这种存储方式在数据更新时会遇到麻烦,这是因为新数据也要和历史数据一起排序…
-
hadoop 2.7.7 安装(测试环境部署) hadoop2.x部署
hadoop 2.7.7 安装(测试环境部署) hadoop2.x部署 系统环境(censtos 6.5 ): 172.16.57.97 namenodeyw 172.16.57.98 datanodeyw1 172.16.57.238 datanodeyw2 软件下载: hadoop wget h…
-
Hadoop2.6.0学习笔记(五)MapReduce实现TopN
鲁春利的工作笔记,谁说程序员不能有文艺范?
-
airtest自动化测试工具快速入门
资源 由于博客不允许放外链(不理解为什么这样,越做越封闭),所以没法直接写URL,大家可以百度搜索关键字“airtest”即可看到官网 以下的内容中有一部分是来自官网的说明 airtest介绍 Airtest是一个跨平台的UI自动…
-
在IDEA中编写spark程序
这里以一个scala版本的word count 程序为例:①创建一个maven项目:②填写maven的GAV:③填写项目名称:④ 创建好 maven 项目后,点击 Enable Auto-Import⑤配置pom.xml文件: <properties> <project.build.sou…
-
(一)UI AUtoMonkey:xcode 里直接执行monkey
最直接简单的一种在ios应用上运行monkey的方式--在xcode使用自带的工具instruments--automation (UI AUtoMonkey); 方法如下: 一、连接真机,或使用模拟器; 二、在xcode下菜单下,点击 Product --Profile,自动…
-
hadoop2.x 将namenode 与 SecondaryNameNode 分开部署
修改方法 在hadoop namenode节点上修改hadoop2.7.7 目录 cd ~/hadoop-2.7.7/etc/hadoop/ 配置 [hadoop@namenodeyw hadoop]$ cat masters datenodeyw1 #说明 Seconda…
-
防伪溯源鉴定增信系统助力企业建立防伪溯源的安全体系
我们都知道区块链有实现数据可追溯、不可篡改的特点,这些特点都是由密码学链接建立起的分布式数据库,然后形成不可篡改的数据源。区块链溯源应用的最多的地方就是各种各样的产品溯源。 因为溯源系统可以在产品从生…
-
大数据之二:ZOOKEEPER安装
ZOOKEEPER安装-伪分布式 1.先解压,并重命名 tar zxvf zookeeper-3.4.5-cdh6.14.2.tar.gz mv zookeeper-3.4.5-cdh6.14.2 /opt/bigdata/zk345 2.配置zoo.cfg cd /opt/bigdata/zk345/conf cp zoo_sample.cfg zoo.cfg …