大数据
-
HDFS原理及架构
HDFS架构 HDFS是一个master/slave结构的服务,其中NameNode是master,一般只在一台节点上启动;DataNode是slave,一般每台节点都会启动一个;DataNode不断地主动向NameNode发送心跳、汇报block信息等;为了对NameNo…
-
软件开发流程
1.需求分析:通过对客户业务的了解和与客户对流程的讨论对需求进行基本建 模,最 终形成需求规格说明书。 2.总体设计:通过分析需求信息,对系统的外部条件及内部业务需求进行抽象建模,最终形成概要设计说明文档。…
-
【ceph】Centos 7.1 安装Ceph
一、环境介绍 环境:三台Centos 7.1的主机 角色 IP admin/node1 192.168.209.100 node2 192.168.209.101 node3 192.168.209.102 二、安装前准备(所有主机) 2.1 关闭防火墙和selinux 关闭 SELINUX sed -i 's/SELIN…
-
kafka配置
1.三节点主机环境:#Red Hat Enterprise Linux Server release 7.5192.168.154.128 my1.db.com my1192.168.154.129 my2.db.com my2192.168.154.130 m…
-
【个推CTO谈数据智能】之多维度分析系统的选型方法
“最近看到一句话:“架构设计的关键思维是判断和取舍,程序设计的关键思维是逻辑和实现”,深以为然!文 | 个推CTO Anson 引言前文回顾:《数据智能时代来临:本质及技术体系要求》作为本系列的第一篇文章,概括性地…
-
开发人员学Linux之终结篇:大型系统开发经验谈
一、前言 这篇文章来源于我的一个 PPT,而这个 PPT 是源于一个朋友的一次邀请,朋友邀请我为一个公司做一堂大约 2 小时的技术讲座,我选定的方向是《如何开发一个大型系统》 在这里我对大型系统的定义为:日均 PV …
-
win7下LoadRunner11.00的安装和破解
一.安装前准备: 1.下载loadrunner安装包,将lr11 安装程序包放到非中文的目录下; 2.Win7下的操作均要以管理员身份运行、安装 3.ie设为默认浏览器 4.关闭所有的xx管家、xx卫视…
-
Python3数据分析与挖掘建模实战视频
第1章 课程介绍【赠送相关电子书+随堂代码】 本章首先介绍本课程是什么,有什么特色,能学习到什么,内容如何安排,需要什么基础,是否适合学习这门课程等。然后对数据分析进行概述,让大家对数据分析的含义和作用…
-
软件测试的13项原则
工作进行得越早,测试用例多次重复进行测试,最后将不再能发现新的缺陷。为了克服这种“杀虫剂悖论”,测试用例需要进行定期评审和修改,同时需要不断地增加新的不同的测试用例来测试软件或系统的不同部分,从而发现…
-
Hadoop-2.6.0学习笔记汇总
鲁春利的工作笔记,好记性不如烂笔头 Hadoop是适用于大数据处理的、分布式的存储(HDFS)和计算(MapReduce)平台,在Hadoop2.0版本开始引入了yarn来实现资源管理与作业调度。 HDFS Had…