开源
-
Centos7修改yum源为阿里源(大数据预科02_2)
##保证可以上互联网,不知如何联网查看大数据预科02_1 (1).安装wget软件 yum install -y wget 安装完成最后显示Complete,表示安装成功(2). 查看yum源信息: yum repolist 目前yum连接的是国外网站,普通(fq貌似现…
-
Yarn流程、Yarn与MapReduce 1相比
[TOC] Yarn流程 可以参考《Hadoop权威指南》P79中的图示与介绍进行理解,当然结合下面这个图示与其中的解释进行理解则会更加清晰易懂,当然,基本的参考个人觉得书本上的图示要更精简,下面这个可以说是其详细版: …
-
MIPS实现Fibonacci
###################################### main: li $a2, 6 li $a1, 1 li $a3, 1 li $a0, 1fib: …
-
pandas处理大数据的技巧
refer : https://yq.aliyun.com/articles/530060?spm=a2c4e.11153940.blogcont181452.16.413f2ef21NKngz# http://www.datayuan.cn/article/6737.htm https://yq.aliyun.com/articles/210393?spm=a2c4e.11153940.bl…
-
yarn知识体系总结
2019/2/18 星期一 yarn知识体系总结 Yarn 产生的原因(1)MapreduceV1 中,jobtracker 存在瓶颈:集群上运行的所有mr 程序都有jobtracker 来调度SPOF 单点故障职责划分不清晰(2) 将jobtracker 的职责划分成两个部…
-
TPA测试项目管理系统-测试用例管理
Test Project Administrator(简称TPA)是经纬恒润自主研发的一款专业的测试项目管理工具,目前已广泛的应用于国内二十余个整车厂和零部件供应商。它可以管理测试过程中的所有数据和文档,包括需求、用例、…
-
如何确定线程池大小
背景 在我们日常业务开发过程中,或多或少都会用到并发的功能。那么在用到并发功能的过程中,就肯定会碰到下面这个问题 并发线程池到底设置多大呢? 通常有点年纪的程序员或许都听说这样一个说法 (其中 N 代表 CPU…
-
获取进程号并赋值判断进程状态
一、 pgrep 是通过程序的名字来查询进程的工具,一般是用来判断程序是否正在运行。在服务器的配置和管理中,这个工具常被应用,简单明了。 用法: #pgrep [选项] [程序名] pgrep [-flvx]…
-
MessagePack Java 0.6.X 多种类型变量的序列化和反序列化(serializati
类 Packer/Unpacker 允许序列化和反序列化多种类型的变量,如后续程序所示。这个类启用序列化和反序列化多种类型的变量和序列化主要类型变量以及包装类,String 对象,byte[] 对象, ByteBuffer 对象等的方法相似。…
-
什么是架构
关于架构的定义,业界有太多不同的说法,但大同小异,本质趋同,只不过侧重各有不同,这里选取IEEE(电气和电子工程师协会)的定义: 架构描述了一个系统的基本组织结构,包含了组成系统的组件、组件之间的关系、组…