开源
-
hadoop的指标类型和日志
Hadoop概念 Hadoop是一个能够对大量数据进行分布式处理的软件框架。 Hadoop 以一种可靠、高效、可伸缩的方式进行数据处理 。 Hadoop 是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保…
-
Python如何创建和使用字典
Python是一种跨平台的计算机程序设计语言。 是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。最初被设计用于编写自动化脚本(shell),随着版本的不断更新和语言新功能的添加,越多被用于独立的、…
-
当网站被恶意刷流量
当网站被恶意刷流量 会有3个后果:1.引起目标服务器超出负载,无法访问。 2.大部分空间是限制流量的,流量用完得关站。 &nb…
-
几种全球DEM数据源
SRTM DLR之SRTM X波段数据:DLR是德国宇航中心缩写,2000在奋进号航天飞机开展SRTM(航天飞机雷达地形测绘任务)时,德国人搭其便车也用自己的雷达测全球的地形数据,DLR用更高精度的雷达测试(X波段),带来了比美国…
-
流式处理新秀Flink原理与实践
随着大数据技术在各行各业的广泛应用,要求能对海量数据进行实时处理的需求越来越多,同时数据处理的业务逻辑也越来越复杂,传统的批处理方式和早期的流式处理框架也越来越难以在延迟性、吞吐量、容错能力以及使用…
-
fabric v1.4 kafka模式(未开启TLS),多节点服务器部署,实现动态添加组织
fabric v1.4 kafka模式(未开启TLS),多节点服务器部署,实现动态添加组织 一、环境准备 这里采用阿里云ECS主机(2核4G,生产环境按实际环境提升配置) 必须指定hostsname fabric官网 github https://gith…
-
第57课:Spark SQL on Hive配置及实战
1,首先需要安装hive,参考http://lqding.blog.51cto.com/9123978/1750967 2,在spark的配置目录下添加配置文件,让Spark可以访问hive的metastore。 root@spark-master:/usr/local/spark/spark-1.6.0-bin-hadoop2.6…
-
hadoop新特性通过NFSv3挂载HDFS到本地目录
原理 NFS允许用户像访问本地文件系统一样访问远程文件系统,而将NFS引入HDFS后,用户可像读写本地文件一样读写HDFS上的文件,大大简化了HDFS使用,这是通过引入一个NFS gateway服务实现的,该服务能将NFS协议转换为…
-
JMeter中的JSON断言方法
JMeter Apache JMeter是Apache组织开发的基于Java的压力测试工具。用于对软件做压力测试,它最初被设计用于Web应用测试,但后来扩展到其他测试领域。 它可以用于测试静态和动态资源,例如静态文件、Java 小服…
-
TIA博途SCL编程学习_选择法排序
用数组定义20个元素,给定20个实数,按从大到小排列。2. 添加FB块,建立变量。如下图: 3. 编写程序。如下图:4. 调用并监控。如下图:5.置1变量enable,监控变量表6.如果你也是博途热爱者,就一起学习吧