开源
-
hadoop启动start-all.sh出错(master: ssh: connect to host master port 22: Connection refused)
当我们打开系统输入hadoop启动命令start-all.sh时出现以下错误: [root@master ~]# start-all.sh starting namenode, logging to /usr/local/hadoop/libexec/../logs/hadoop-root-na…
-
简单了解一下大数据的一些基本概念
一、大数据 1、什么是大数据? 大数据(Big data或Megadata):大数据,或称巨量数据、海量数据、大资料,指的是所涉及的数据量规模巨大到无法通过人工,在合理时间达到截取、管理、处理、并整理成为人类所能解读的…
-
学习大数据需要掌握的知识,需要学习的数据技术
大数据的发展历程总体上可以划分为三个重要阶段,萌芽期、成熟期和大规模应用期,20世纪90年至21世纪初,为萌芽期,随着,一批商业智能工具和知识管理技术的开始和应用,度过了数据萌芽,21世纪前十年则为成熟期,…
-
App推广技术:助力App更好的推广
在移动互联网红利消失殆尽、市场竞争日趋激烈的背景下,App的推广越来越难了,如何去有效的进行推广,吸引更多的用户流量,成为了众多互联网企业最为关注的问题。 而App 推广技术指的就是通过一些技术的方式来提高 …
-
部署HDFS
HDFS存放副本时会优先在同一个数据节点备份一份,然后在不同的虚拟机架上备份 namenode的HA是靠主备方式保证的,自动切换时要用到zookeeper,手动切换可以通过命令,备节点可以在数据节点上,一套HDFS-HA最少需要3…
-
ERP系统生产委外管理,内外无缝连接
信息化时代,一切都被大数据包围,机会稍纵即逝,行动分秒必争,联合才能致胜!前段时间燃爆朋友圈的《红海行动》,上映4天票房就高达40亿人民币,将“海上蛟龙,陆地猛虎,空中雄鹰,反恐精英”美誉的“蛟龙突击队”霸…
-
一次由日志引发的严重性能问题的排查过程
一 现象描述 新系统上线后运行正常,但突然有一天客户反馈登录出现很慢的情况。那就先重现客户的问题,在测试环境,单笔测试系统登录发现响应时间在100ms以内,数据上看还是不错的。但并发测试,结果竟然大…
-
Hadoop 系列(四)—— Hadoop 开发环境搭建
一、前置条件 Hadoop 的运行依赖 JDK,需要预先安装,安装步骤见: Linux 下 JDK 的安装 二、配置免密登录 Hadoop 组件之间需要基于 SSH 进行通讯。 2.1 配置映射 配置 ip 地址和主机名映射: vim /etc/hosts # 文…
-
Delphi 设置系统默认打印机
获取默认打印机名: function TForm1.GetDefaultPrinterName: string; var iSize: Integer; sIniFile, sSection, sKeyName: PChar; begin iSiz…
-
数据分析_DIKW与数据工程
DIKW体系 DIKW体系是关于数据、信息、知识及智慧的体系,可以追溯至托马斯·斯特尔那斯·艾略特所写的诗--《岩石》。在首段,他写道:“我们在哪里丢失了知识中的智慧?又在哪里丢失了信息中的知识?”(Where is the w…