开源
-
软件测试V模型
软件测试V模型 V模型大体可以划分为以下几个不同的阶段步骤：需求分析、概要设计、详细设计、软件编码、单元测试、集成测试、系统测试、验收测试。 需求分析 即首先要明确客户需要的是什么，需要软件做成什么样子，…
-
零基础学习之大数据开发环境搭建步骤
第0步：准备好Hadoop安装包素材：hadoop-2.6.0-cdh6.7.0.tar.gz 第1步：输入如下命令，然后一直点回车键。 第2步：输入如下命令 第3步：将hadoop安装包放在E盘muke8soft文件夹里 第4步：按下键盘Alt+P,进入sftp 第5…
-
YARN资源调度策略之Capacity Scheduler
背景 yarn默认使用的是最简单的FIFO调度器，即一个default队列，所有用户共享，分配资源也是先到先得，没有优先级之分。有时一两个任务就把资源全占了，其他任务吃不到资源造成饥饿，显然…
-
新手入门篇：虚拟机搭建hadoop环境的详细步骤
前两天看到有人留言问在什么情况下需要部署hadoop，我给的回答也很简单，就是在需要处理海量数据的时候才需要考虑部署hadoop。关于这个问题在很早之前的一篇分享文档也有说到这个问题，数据量少的完全发挥不了hadoo…
-
Indy文件断点续传代码
function TFrmFileManageCard.UpLoadFileBreak(SourseFileName, DestFileName: String): Integer; var upsize:int64; IDFTP:TidFtp; LSourceStream: TFileStream; LSourc…
-
好程序员大数据学习路线hive内部函数
好程序员大数据学习路线hive内部函数，持续为大家更新了大数据学习路线，希望对正在学习大数据的小伙伴有所帮助。1、取随机数函数：rand()语法: rand(),rand(int seed) 返回值: double 说明: 返回一个0到1范围内的…
-
大数据架构师拿年薪50W的方法诀窍
什么是大数据架构师： 围绕大数据系平台系统级的研发人员， 熟练Hadoop、Spark、Storm等主流大数据平台的核心框架。深入掌握如何编写MapReduce的作业及作业流的管理完成对数据的计算，并能够使用Hadoop提供的通用算…
-
字符串split操作到底有多少坑
微信公众号 长字符串切分，取其中元素封装或者将封装信息组合成长字符串都是常规操作，但是这种长字符串往往是不可控的，如一个长字符串就是由一个元素组成，或者存在空字符串的元素，看似这并没有什么问题，但是使…
-
HyperLeger Fabric SDK开发（四）——channel
HyperLeger Fabric SDK开发（四）——channel 一、channel简介 1、channel 简介 pkg/client/channel支持访问Fabric网络上的通道。channel客户端实例提供与指定通道上的Peer节点进行交互的处理函数。channel客户端可以…
-
Apache-Jmeter监控服务资源
Jmeter本身没有监控服务器资源的功能，需要添加额外的插件，插件参考的网址：http://www.jmeter-plugins.org/ 一、监控原理图 二、Jmeter-Plugs和PerfMonAgent的下载和安装 （1）Jmeter-Plugs的下载网址http:…