大数据
-
设计模式 之 单例模式
重建服务器检测重建请求列表。
-
第16课:Spark Streaming源码解读之数据清理内幕彻底解密
本期内容: Spark Streaming数据清理原因和现象 Spark Streaming数据清理代码解析 对Spark Streaming解析了这么多课之后,我们越来越能感知,Spark Streaming只是基于Spark Core的一个应用程序,因此掌握Spark Stre…
-
KGB知识图谱软件助力招标文件编制与审查
作为招投标过程中的重要文件,招标文件的审核在招标文件质量控制过程中十分重要,那么招标文件中有哪些重要点呢,招标文件审核要做好哪些工作呢?一、审核完整性无论什么文章,写作都有相应的要求,而完整性就是最…
-
揭秘腾讯大数据冰山一角
一、人群画像 1.什么是人群画像大数据? 人群画像通过收集用户的行为特征、年龄特征、用户场景、地域特征、目标动机等一系列海量真实数据,建立用户模型,抽出典型目标用户针对性分析。 2.人群画像大数据有什么作用…
-
递归思想及应用续(二十九)
今天我们继续来学习递归,下来我们先来回顾下函数的调用过程:在程序运行后有一个特殊的内存区供函数调用使用。那么这个内存区有什么用呢?1、用于保存函数中的实…
-
spring cloud(三):Eureka服务的搭建
1、 概念: Eureka - 云端服务发现,一个基于 REST 的服务,用于定位服务,以实现云端中间层服务发现和故障转移。 2、 搭建:a、首先讲下单机搭建,先新建一个maven项目,在pom里面导入eureka的坐标: …
-
Git 一些错误的解决方法
注:Git初学者的个人经验记录,仅供参考 1. Pull is not possible because you have unmerged files. 症状:pull的时候 $ git pull Pull is not possible because you have unmerged files.Please, fix them up in …
-
Hadoop2.6+Zookeeper3.4+Hbase1.0部署安装
继hadoop完全分布式安装后,再结合zookper+hbase安全。在之前环境配置下继续进行。 一、zookper安装 1.1 下载并解压软件 cd /software wget -c http://apache.fayea.com/zookeeper/zookeeper-3.4.10/zookeeper-3.4.…
-
主节点的namenode、secondarynamenode启动成功,但是slave启动不成功
Hadoop2.7.2集群secondarynamenode启动成功,但是slave节点datenode启动不成功。slave节点在 logs下的 datanote 日志中报错:java.net.BindException: Port in use: localhost:0, 以及提示:无法指定被请求的地址…
-
hadoop+Spark+hbase集群动态增加节点
分布式系统的一个优势就是动态可伸缩性,如果增删节点需要重启那肯定是不行的。后来研究了一下,发现的确是不需要重启集群,直接在新增的节点上分别启动以下进程即可。以hadoop、spark和hbase为例: 一、hadoop增加…