开源
-
Spark Core 的核心理论
1. Spark Core的核心功能 (1)SparkContext: 通常而言，DriverApplication 的执行与输出都是通过SparkContext完成的，在正式提交Application 之前，首先需要初始化SparkContext。SparkContext隐…
-
OGC采用3D Tiles作为社区标准
3D Tiles已被采用作为社区标准，用于开放地理空间联盟（OGC）共享，可视化，融合和与大量异构3D内容交互。 另有超图的S3M和ESRI的I3S标准。
-
hadoop动态添加datanode启动失败的经验
动态添加datanode节点，主机名node14.cnshell>hadoop-daemon.sh start datanodeshell>jps #查看datanode进程是否已启动发现DataNode进程启动后立即消失，查询日志发现一下记录： 2018-04-15 00:08:43…
-
搭建CDH实验环境，以三个节点为例的安装配置
（一）实验环境l 实验介质n CentOS-7-x86_64-Everything-1708.ison jdk-8u161-linux-x64.rpmn cloudera-manager-centos7-cm5.12.1_x86_64.tar.gzn CDH-5.12.1-1.cdh6.12.1.p0.3-el7.parceln CDH-5.12.1-1.cdh6.12.1…
-
Hadoop日志小结
一、日志分类 1、进程日志 进程日志即为hadoop各个守护进程的日志，例如ResourceManager、NodeManager、NameNode、DataNode等守护进程。集群启动或者运行期间出现异常，首先应该查看进程日志，它是系…
-
WEB测试范围
在实际工作中、WEB需要测试以下的功能及性能点 （1）文字或者图片的连接的有效性测试、简称连接测试 （2）表单提交测试、简称表单测试 （3）浏览器交互测试、比如修改浏览器选项设置、以发现当前网页可能存在的问题…
-
HDFS（NameNode）的联盟：Federation
HDFS（NameNode）的联盟：Federation，配置HDFS联盟，多个NameNode节点同时存活，根据代理配置的路由规则处理客户端不同的请求，实现负载均衡，同时也可以缓存更多的元信息，它与HA的区别在于，联盟是多个NameNode…
-
jenkins插件之Publish Over FTP
说明 这个插件可以将文件发布到FTP上去。 系统设置 FTP Server Name：名称 Hostname：主机IP或者域名 Username：ftp登陆用户名 Password：ftp密码 Remote Directory：远程根目录（建议设置为：/） &n…
-
页面MC请求次数过多
实例1：XX车型库参数配置页 【现象】：车型配置页MC读写请求数差不多300次。 【原因分析】：车型配置页参数对象缓存数较多，导致页面MC请求数多。 【解决方案】：车型配置页参数变化比较少，把对象缓存改成页面缓存…
-
Apache Calcite官方文档中文版- 进阶-4. Lattices
第二部分 进阶(Advanced) 1. Lattices Lattice是一个创建并填充物化视图的框架，可以识别以及解决特定查询的物化视图。 一个Lattice代表一个星型(或雪花)模型，不是通用的schema。特别地，…