大数据

  • gdal编译

    可直接运行gen*批处理文件生成项目文件在vs2015中打开直接build。或者nmake命令编译:1)64位和32位分别使用相应cmd;2)命令参数可选debug或release版。 问题:debug生成dll和pdb在vs2015中调试找不到相应的符号,…

    大数据 2021年11月16日
  • 数据结构—各类‘排序算法’实现(下)

           在上一篇博客中,主要是实现各种的排序算法,并针对一些算法进行了优化的处理,下面主要讨论一下非比较排序的算法(计数排序、基数排序),同时并对各种排序算法的性能…

    大数据 2021年11月16日
  • Zabbix iostat 监控配置

    zabbix iostat 监控模板安装与配置 配置定时任务,用于生成iostat的统计数据 crontab -e * * * * * /usr/local/zabbix327/bin/iostat-cron.sh 编辑 /usr/local/zabbix327/bin/iostat-cron.sh #!/bin/bash DEST_DATA…

    大数据 2021年11月16日
  • Redis配置文件各项参数说明

    最近一个项目用到Redis做数据缓存,使用Redis最重要的是写配置文件,那么要了解它的各个配置参数含义,今天整理了一下,发现有些参数不太明白,特贴出来请大家帮忙看看。   daemonize <yes|no>:是否以…

    大数据 2021年11月16日
  • 小议Lambda与Kappa架构,不可变数据的计算探索

    Lambda架构说起来也很简单,就是通过分布式系统的组件搭建,设计出一个具有鲁棒性,可扩展,低延时的分布式计算系统。之所以称之为Lambda架构,就是它最为核心的点就是理由了数据处理过程之中的不可变性与无依赖性…

    大数据 2021年11月16日
  • Java简单介绍及Java生态

    核心思想:面向对象编程,继承,高兼容(代码移植性强),避免重复造轮子,开源.   Java的起源和发展细节就不介绍了,Java是高级开发语言,类似C++,语法和C++ 有很多类似之处,但是做了些优化,主要是在编码写程序…

    大数据 2021年11月16日
  • Spark Core 的核心理论

    1. Spark Core的核心功能  (1)SparkContext:    通常而言,DriverApplication 的执行与输出都是通过SparkContext完成的,在正式提交Application 之前,首先需要初始化SparkContext。SparkContext隐…

    大数据 2021年11月16日
  • OGC采用3D Tiles作为社区标准

    3D Tiles已被采用作为社区标准,用于开放地理空间联盟(OGC)共享,可视化,融合和与大量异构3D内容交互。 另有超图的S3M和ESRI的I3S标准。

    大数据 2021年11月16日
  • hadoop动态添加datanode启动失败的经验

    动态添加datanode节点,主机名node14.cnshell&gt;hadoop-daemon.sh start datanodeshell&gt;jps #查看datanode进程是否已启动发现DataNode进程启动后立即消失,查询日志发现一下记录: 2018-04-15 00:08:43…

    大数据 2021年11月16日
  • 搭建CDH实验环境,以三个节点为例的安装配置

    (一)实验环境l 实验介质n CentOS-7-x86_64-Everything-1708.ison jdk-8u161-linux-x64.rpmn cloudera-manager-centos7-cm5.12.1_x86_64.tar.gzn CDH-5.12.1-1.cdh6.12.1.p0.3-el7.parceln CDH-5.12.1-1.cdh6.12.1…

    大数据 2021年11月16日