大数据
-
Hadoop日志小结
一、日志分类 1、进程日志 进程日志即为hadoop各个守护进程的日志，例如ResourceManager、NodeManager、NameNode、DataNode等守护进程。集群启动或者运行期间出现异常，首先应该查看进程日志，它是系…
-
WEB测试范围
在实际工作中、WEB需要测试以下的功能及性能点 （1）文字或者图片的连接的有效性测试、简称连接测试 （2）表单提交测试、简称表单测试 （3）浏览器交互测试、比如修改浏览器选项设置、以发现当前网页可能存在的问题…
-
HDFS（NameNode）的联盟：Federation
HDFS（NameNode）的联盟：Federation，配置HDFS联盟，多个NameNode节点同时存活，根据代理配置的路由规则处理客户端不同的请求，实现负载均衡，同时也可以缓存更多的元信息，它与HA的区别在于，联盟是多个NameNode…
-
jenkins插件之Publish Over FTP
说明 这个插件可以将文件发布到FTP上去。 系统设置 FTP Server Name：名称 Hostname：主机IP或者域名 Username：ftp登陆用户名 Password：ftp密码 Remote Directory：远程根目录（建议设置为：/） &n…
-
页面MC请求次数过多
实例1：XX车型库参数配置页 【现象】：车型配置页MC读写请求数差不多300次。 【原因分析】：车型配置页参数对象缓存数较多，导致页面MC请求数多。 【解决方案】：车型配置页参数变化比较少，把对象缓存改成页面缓存…
-
Apache Calcite官方文档中文版- 进阶-4. Lattices
第二部分 进阶(Advanced) 1. Lattices Lattice是一个创建并填充物化视图的框架，可以识别以及解决特定查询的物化视图。 一个Lattice代表一个星型(或雪花)模型，不是通用的schema。特别地，…
-
日志结构化，SQL来查询
通常，日志文件都是文本格式，其中的内容是非结构化的文本串。这就使得我们查询日志信息时，一般只能使用文本编辑软件的搜索功能，输入关键字后，靠眼力去侦查每处匹配结果。在日志量不大，或者只是偶尔查一下时，…
-
转换QTP对象库xx.tsr文件为xx.xml文件以便git跟踪
众所周知，Git仅能跟踪文本文件，而QTP所生成的对象库文件xx.tsr是一种二进制文件，不可以被git所跟踪。本文详细介绍了利用git的hooks特性，来将xx.tsr文件转换成xx.xml文件，以便跟踪对象库的版本历史。 首先，git…
-
java 连接hbase
package com.weshare.bigdata; import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.TableName;import org.apache.hadoop.hbase.client.*;imp…
-
Perl 读取特定格式的文件名
在Perl语言编程一书中学习到了一种直接读取特定格式文件的方法，非常简洁，代码如下： while (<*.pl>){ print $_." "; }